부정경쟁방지법1 웹 크롤링(Web Crawling/Scraping)은 과연 합법일까? 1. 웹 크롤링(Web Crawling) 웹크롤링은 무엇인가? 웹 크롤러(web crawler)는 하나 이상의 웹사이트의 일부 또는 전체를 자동으로 정보를 수집하는 프로그램으로 정의할 수 있다. 웹 스파이더(web spider), 자동 인덱서(automatic indexer) 등으로 불리기도 한다. 웹 크롤링(web crawling)이란 이러한 프로그램을 통해 이루어지는 작업을 의미한다. 웹 크롤러가 하는 작업을 '웹 크롤링'(web crawling) 혹은 '스파이더링'(spidering)이라 부른다. 검색 엔진과 같은 여러 사이트에서는 데이터의 최신 상태 유지를 위해 웹 크롤링한다. 웹 크롤러는 대체로 방문한 사이트의 모든 페이지의 복사본을 생성하는 데 사용되며, 검색 엔진은 이렇게 생성된 페이지를 보.. 2022. 6. 12. 이전 1 다음