
안녕하세요! 우주파파훈입니다. 블로그를 작성하면서 크롤링과 스크래핑이 궁금해서 공부해 보았습니다. 크롤링(Crawling)과 스크래핑(Scraping)은 데이터 수집과 관련된 용어로, 종종 함께 사용되지만 목적과 방식에서 약간의 차이가 있습니다. 이 차이점에 대해 함께 살펴보겠습니다. 1. 크롤링(Crawling) - 목적: 웹사이트를 탐색하고, 페이지 구조를 파악하며, 링크를 따라가며 새로운 페이지를 발견하는 것.- 초점: 어디에 어떤 데이터가 있는지 찾는 과정- 예시 "책 도서관에 가서 어떤 책들이 어디에 있는지 확인하기."- 검색 엔진(예: 구글)은 크롤러(봇)를 사용해 웹 페이지를 탐색하고, 페이지의 링크 구조를 따라가며 웹 전체의 콘텐츠를 찾아냅니다.- 기술: 크롤러 프로그램(예: ..
카테고리 없음
2024. 11. 19. 20:17