JJUNNAK's

[ Selenium ] Selenium 준비과정 본문

Crawling

[ Selenium ] Selenium 준비과정

최낙준 2023. 1. 13. 04:15

뉴스, 날씨, 기사 등 동적 웹페이지를크롤링할 때에 BeautifulSoup를 사용하면

웹서버에서 최초로 전달받은 내용만을 파싱 하게 된다.

때문에 가공 이후의 html내용은 반영되지 않아 Selenium과 Chrome 드라이버를 통해서

크롤링해야 함.

from selenium import webdriver

[ Chrome driver 설치 ]

  1. chrome://version/ 에 접속하여 나의 크롬 버전 확인

2. https://chromedriver.chromium.org/downloads 에서 나의 버전과 맞는 드라이버 다운로드

 

3. 다운로드한 파일을 압축해제하고 해당 경로를 잘 기억해야 함.

* 추후에 코드 작성할 때 사용하기 때문.

 

Comments