웹 크롤링이랑 웹 스크래핑... 다른거임? 네. 다릅니다. 크롤링은 '기어 다니다' 라는 뜻을 가졌죠. 웹 크롤링은 URL을 탐색해 반복적으로 링크를 찾고 가져오는 과정을 말합니다. 반면 웹 스크래핑은 특정한 웹 페이지에서 데이터를 추출하는 것입니다. 예를 들어 원하는 주제의 뉴스만을 추출하거나, 어떤 상품의 가격 비교를 하는 것 모두 웹 스크래핑입니다. 스크래핑을 하고자 하는 특정 웹 사이트가 있고 그곳에서 필요한 정보만 가져옵니다. 둘은 엄연히 다르다는 점을 잊지 맙시다! 데이터 가져오는 거 불법 아님? 데이터 마음대로 가져와도 됨? 결론부터 말하자면 데이터를 스크래핑 하는 것 그 자체는 불법이 아닙니다. 하지만 각 웹사이트마다 데이터 관리 목적에 따라 접근을 막아놓은 페이지도 있습니다. 알아보려면 ..
