한빛미디어

웹크롤러 처음들어보는 용어라 익숙치않았다. 찾아보니 웹의 데이터를 수집하는 작업전체를 말한다. API를 활용하는 프로그램이나 사람이 직접 웹브라우저를 조작하는 방법만제외하면 어떤방법을 쓰든 상관없다. 가장 널리 쓰는방법은 프로그램을 만들어 웹서버에 쿼리를 보내 데이터를 요청하고 이를 파싱해 필요한 정보를 주출하는 작업을 자동으로 한다. 현실적으로는 웹스크레핑은 데이터분석, 자연어처리, 정보보안같은 다양한 프로그래밍 기술을 포괄한다. 이 책은 웹스크레핑을 소개하는것에 그치지않고 오늘날 웹에 존재하는 거의 모든 종류의 데이터를 수집, 변형, 사용할 수있는 상세한가이드로 읽을 수 있게 나와있다. 파이썬을 전혀 모르면 어려울것같다. 저자가 파이썬초중급자 수준에 맞춰 개념을 설명하고 코드예제를 작성했기때문에 어느정도는 알고 보면 좋을책이다. 인터넷을 통해 원격소스에서 데이터를 수집한다는 목적에 부합하는 선에서 완벽하게는 아니지만 웹스크레이퍼를 만드는데 필요한만큼은 나와있다. 1부는 웹스크레이핑과 웹크롤링에 대해 깊이있게 설명. 2부는 독자가 만들때 유용한 추가주제를 다룬다. 이책을 읽고나서 나만의 웹크롤러를 구현해봐야겠다고 생각했다.