728x90 반응형 전체 글190 크롤링 1 크롤링이란 : web에 존재하는 contents를 수집하는 작업을 말합니다. - 크롤링을 할 때 사용하는 방법들은 아래와 같습니다. 1. HTML 페이지를 가져와서, HTML/CSS 등을 파싱하고, 필요한 데이터를 추출하는 방법. 2. Open API(Rest API)를 제공하는 서비스에 Open API를 호출해서, 필요한 데이터를 추출하는 방법. 3. Selenium등 브라우저를 프로그래밍으로 조작해서, 필요한 데이터를 추출하는 방법. 각 방법을 수행하기 위하여 네이버 뉴스 기사를 사용하였습니다. 이 페이지에서는 아래의 모듈을 다루게 됩니다. - from bs4 import BeautifulSoup # 추출 - import requests # html불러오기 - from urllib.request im.. 2019. 11. 21. 이전 1 ··· 19 20 21 22 다음 728x90 반응형