본문 바로가기

Tutorial

(18)
[다나와리뷰] 크롤링하기(ajax 활용) ajax을 활용한 크롤링 : >> 페이지가 로딩 될때 이미 모든 정보가 넘어와있는경우에 사용이 가능하다 >> 굉장히 짧은 시간에 많은 정보를 크롤링 할 수 있다 다나와 페이지 확인 http://www.danawa.com/ 스마트한 쇼핑검색, 다나와! : 가격비교 사이트 가격비교 사이트 - 온라인 쇼핑몰, 소셜커머스 전 상품 정보 가격비교 사이트, 비교하면 다나와 www.danawa.com >> 아래 코드를 이해하기 위해서는 다나와 html에 대한 이해가 먼저 필요하다 >> 직접 들어가서 개발자 모드를 열고 확인해야함 Loading Library #필요한 패키지 로딩 import time import requests from bs4 import BeautifulSoup >> 크롤링 하는데 필요한 라이브러리..
[네이버플레이스] 데이터 크롤링하기(셀레니움, ajax 활용) 셀레니움, Ajax를 활용한 네이버 플레이스 정보 크롤링 학습용으로 만든 자료. Introduction 기본 url을 네이버 맵으로 주고, 다양한 검색어를 검색하여 상세보기로 들어간 뒤, 해당하는 플레이스의 정보와, 예약자 리뷰, 블로그 리뷰를 가져오는 코드. Install_Library # 셀레니움 설치 pip install selenium - 라이브러리를 사용하려면 해당 라이브러리의 설치가 먼저 선행되어야함 # 크롬 드라이버 설치 https://sites.google.com/a/chromium.org/chromedriver/downloads Downloads - ChromeDriver - WebDriver for Chrome WebDriver for Chrome sites.google.com - 크롬..