Selenium2 selenium 웹크롤링 selenium 웹크롤링 1. selenium 을 활용한 웹크롤링 방법 예제 def login(userId, user_password): """ 페이지 로그인 :param userId: :param user_password: :return: """ oauth_login_url = 'https://nid.naver.com/nidlogin.login?mode=form&url=https%3A%2F%2Fwww.naver.com' # 페이지 접속 _driver.get(oauth_login_url) # Element Find userIdElem = _driver.find_element_by_id("id") userPasswordElem = _driver.find_element_by_id("pw") # Value S.. 2019. 6. 21. Python Web Crawler / selenium Web Crawler LibraryPython Library특징Selenium 웹테스팅 도구 프레임웍브라우저와 드라이버로 연결되어 브러우저에서 하는 작업들을 자동화 시킬수 있다.웹인터페이스로 동작하며, phantomJS와 호환 가능PhantomJS웹테스팅 도구 프레임웍 , 화면이 존재 하지 않는 특징웹표준을 따르는 Headless Webkit자바스크립트를 사용 할 수 있으며 , DOM, CSS JSON, SVG등 컨트롤 가능BeautifulsoupHTML 을 쉽게 파싱하여 사용 할 수 있는 특징HTML과 XML 파일에서 데이터를 읽어내는 라이프러리 ChromeDriverhttps://sites.google.com/a/chromium.org/chromedriver/downloads Selenium APIh.. 2018. 8. 3. 이전 1 다음 728x90