한빛미디어

​

파이썬은 최근 프로그래밍 입문 언어로 각광받고 있다. 그래서 쉬운 언어, 초보자용 언어라는 이미지가 있을 수도 있다. 하지만 파이썬도 하나의 언어! 수많은 일들을 할 수 있다는 것이다.

​

특히 AI 분야에서 데이터 처리를 위해서 주로 사용된다. 그 어렵다는 AI에 말이다!

​

그리고 웹 크롤링도 당연히 가능하다. 이 책은 바로 제목 그대로 파이썬으로 웹 크롤러를 만드는 내용을 다루고 있다. 사실 웹 크롤링 자체는 다른 많은 언어들로도 모두 가능하다. 그런데 이 책은 파이썬은 강력한 장점을 사용해서 한층 더 훌륭한 크롤러를 만들었다고 생각한다.

​

그 장점이란 바로 파이썬의 데이터 가공 능력이다.

​

그렇다고 또 너무 어려운게 아닐까 걱정할 필요는 없다. 처음에는 이렇게 아주 간단한 내용부터 다룬다. 단순히 url에 접속해서 받는 내용을 그대로 보여주는 것부터 시작한다.

​

데이터를 파일로 저장하는 방법도 다룬다. 사실 이것도 특별할 것이 없다면 없는 내용이긴 하다. 하지만 쉽게 CSV 파일을 다룰 수 있어서 편리하다.

​

그리고 대망의 데이터를 가공하는 부분! 중의 일부이다.

마지막에는 테스트하는 부분까지 다루고 있다. 단순히 웹 크롤링만 하는 것이 아니라 데이터를 수집하고 저장하고 또 불필요한 것을 제거해서 가공한 데이터를 뽑아내는 전반적인 내용을 다루고 있다. 심지어 유닛 테스트까지.

​

파이썬으로 크로링을 하는 법을 배우고 싶다면 이 책하나만 봐도 끝장을 볼 수 있을 것이다.