데이터 크롤링 (1) 썸네일형 리스트형 [Python] 데이터 수집을 위한 웹 크롤링(Crawling) 원하는 데이터를 수집하고자 할 때 크롤링(Crwaling)을 하곤 한다. 크롤링은 해당 페이지의 데이터들을 추출하는 행위를 의미한다. 이 때 크롤링을 하기 위한 소프트웨어를 크롤러(Crawler)라고 하며, 봇, 스파이더, 지능 에이전트 라고도 불린다. 스크래이핑과 크롤링의 차이 ? Scraping : 웹 사이트의 특정 정보를 추출하는 것. 웹 데이터의 구조 분석이 필요 Crawling : 프로그램이 웹사이트를 정기적으로 돌며 정보를 추출하는 것 수집 데이터의 형태 데이터를 수집하기 앞서, 수집 데이터의 형태를 3가지로 구분할 수 있다. 수집 데이터 형태 정형 – 일정한 규격에 맞춰서 구성된 데이터 (어떠한 역할을 알고 있는 데이터) 관계형 데이터베이스 시스템의 테이블과 같이 고정된 컬럼에 저장되는 데이.. 이전 1 다음