안 쓰던 블로그

파이썬 크롤링 시리즈 네이버 웹툰 이미지 크롤링, 저장하기: foxtrotin.tistory.com/173 셀레니움으로 웹 게임 자동 매크로 만들기: foxtrotin.tistory.com/179 네이버 실시간 검색어 가져오기: 현재글 네이버 웹툰 요일별 크롤링: foxtrotin.tistory.com/328 2020년 1월부터 네이버 실시간 검색어가 ajax통신 방식을 이용한 동적으로 바뀌면서 많은 블로그에서 했던 방식인 span.ah_k으로는 아무 값도 받아지지 않는다 현재 네이버 실시간 검색어를 크롤링하는 방법은 두 개가 있다 1. 데이터랩에서 크롤링 2. 데이터를 json형태로 받아와서 크롤링 이 글에서 두 가지를 다 다뤄볼 것이다 아래 크롤링 코드를 실행하기 위해서는 크롬 드라이버가 필요하다 f..

*본 글은 공부목적으로만 참고하세요 파이썬 크롤링 시리즈 네이버 웹툰 이미지 크롤링, 저장하기: 현재글 셀레니움으로 웹 게임 자동 매크로 만들기: foxtrotin.tistory.com/179 네이버 실시간 검색어 가져오기: foxtrotin.tistory.com/267 네이버 웹툰 요일별 크롤링: foxtrotin.tistory.com/328 사용할 모듈 1. urllib: 내장 모듈. 파이썬에서 웹과 관련된 데이터를 쉽게 이용할 수 있게 한다. 4개 중에 request사용 2. beautifulsoup: 파싱을 도와준다 3. os: 내장 모듈. 운영체제에서 제공되는 기능을 파이썬에서 수행할 수 있게 함 모듈 설치 파이썬이 있는 디렉토리-Scripts폴더에서 cmd키고 pip install beauti..