반응형
http://toddhayton.com/2015/03/11/scraping-ajax-pages-with-python/
그냥 ajax 가져오는거지만 이미 크롤링코드를 사용하고 있으면 다시만들기 번거롭다.
그래서 그냥 크롤링코드에서 request.post 로 ajax 를 크롤링 코드 내부에서 사용하여 json 받아온다.
그리고 뒷작업(db, csv, txt)은 크롤링에서 사용하던 방식으로 넣는다.
반응형
http://toddhayton.com/2015/03/11/scraping-ajax-pages-with-python/
그냥 ajax 가져오는거지만 이미 크롤링코드를 사용하고 있으면 다시만들기 번거롭다.
그래서 그냥 크롤링코드에서 request.post 로 ajax 를 크롤링 코드 내부에서 사용하여 json 받아온다.
그리고 뒷작업(db, csv, txt)은 크롤링에서 사용하던 방식으로 넣는다.
댓글