메뉴 바로가기 검색 및 카테고리 바로가기

한빛미디어

독자리뷰

파이썬으로 크롤러를 만들때는 이 책 하나면 된다.

gutss***

|

2017-01-07

파이썬으로 웹 크롤러 만들기

웹 어디서든 내가 원하는 데이터를 쏙쏙쏙

  • 저자 : 라이언 미첼
  • 번역 : 한선용
  • 출간 : 2016-12-01

이전부터 파이썬으로 크롤링 작업을 하긴 해왔었다.

하지만 그러면서도 아쉬움들은 항상 있었는데, 이 책을 읽으며 이러한 아쉬움들을 

해결할 실마리와 정보를 많이 얻었다.

 

크롤링이 항상 필요한 건 아니었어서 수집을 하고 엑셀파일로 저장을 해왔었다.

하지만 DB에 계속 저장해두고 한번 접속한 웹사이트는 건너뛴다든가, 중복된 내용은

긁지 않는다든가 하는 테크닉을 물론 다룬다.

 

깊이 우선 탐색이나, 너비 우선 탐색 알고리즘을 이용한 크롤링 테크닉도 소개하면서

구글의 스파이더 같은 크롤링봇을 제작할 수 있는 정보를 소개한다.

 

자연어 처리와 이미지 처리를 다루고 브라우저 제어 및 크롤링 윤리 들도 다루는 면에서

아주 실용적이고 효율적인 정보를 얻어 매우매우 기쁘다.

 

분량은 콤팩트하지만 다루는 내용은 매우 유용하며 핵심적이라 

파이썬으로 웹크롤링을 하고자 하는 사람들에겐

"아무것도 묻지도 않고 따지지 않고 이 책을 봐." 라고 할겁니다.

 

 

닫기

해당 상품을 장바구니에 담았습니다.이미 장바구니에 추가된 상품입니다.
장바구니로 이동하시겠습니까?