메뉴 바로가기 검색 및 카테고리 바로가기

한빛미디어

독자리뷰

웹 크롤링의 모든 기본을 다룬 책

jrcfore***

|

2025-03-28

파이썬으로 웹 크롤러 만들기

웹 어디서든 내가 원하는 데이터를 쏙쏙쏙

  • 저자 : 라이언 미첼
  • 번역 : 한선용
  • 출간 : 2016-12-01

이 책은 기본적인 python 언어 지식을 갖췄다는 전제하에 구성된 책임을 밝힙니다.

​

검색이라 함은 어찌 보면 사용자가 본인에게 필요한 지식, 정보를 획득하는 일련의 과정 전체라 할 수 있다. 그 과정에서 사용자는 노출된 정보 사이에 본인의 자의적 선택에 따라 필요한 정보를 취득, 가공 그리고 지식화한다.

​

머신의 수준이 향상되고 인공지능과 같은 기술이 고도화됨에 따라서 기존에 인간이 직접 데이터를 수집하여 머신에 주입하던 방식에서 이제는 관련된 과정마저도 기계가 대신해 주는 시대가 도래했다.

​

그것이 바로 웹 크롤러이며, 그것이 바로 자동화의 영역이다.

​

이 책은 크롤링이라는 기술 중심으로 하기의 내용들을 설명하고 있다.

​

  • 크롤링 타깃 선정하는 방법
  • 데이터를 어떤 포맷으로 가공하여 어떻게 저장할지에 관한 방법
  • 데이터 프로세싱
  • 자연어 처리
  • 등

​

모든 챕터가 적당한 배경지식 설명과 예제로 이루어져 있어서 실습하고 이해하는 데에 큰 어려움이 없었으며, 파이썬 관련해서 대략적인 이해를 갖추고 있다면 누구든 무난히 이해할 수준의 전문성과 기술들로 이루어져 있다. 

​

그렇기에 평소 웹 크롤러가 어떻게 동작하는지 그 원리가 궁금하였거나, 자신만의 크롤러 구축을 희망하시는 분이 계시다면 이 책을 통해 본인의 기술/지식수준을 고도화해보시길 기원한다.

​

【 파이썬으로 웹 크롤러 만들기를 읽고 나서 】

​

시대가 변했다. 이제는 전통적인 검색 모델에서 벗어나 대부분의 기술이 자신의 기술에 LLM을 비롯한 자동화 기술 그리고 AI 기술을 접목하고 있다.

​

AI 기술은 10년 전 아니 30년 전부터 주목받아 왔었지만, 지금처럼 생각을 실체화 아하는 시대는 처음이라 할 수 있을 것이다.

​

변화가 빠르다는 것은 그만큼 기술 분야이거나 개인에게 있어서 생존의 사활이 하루하루 빠르게 변화함을 암시하지만, 이외로 새로운 시대가 - 새로운 기회가 이전과는 비교하지 못할 정도로 도래하고 있음을 암시함을 잊지 말자.

 

​

#본 도서는 "한빛미디어 <나는 리뷰어다> 활동을 위해서 책을 제공받아 작성된 서평입니다.

 

닫기

해당 상품을 장바구니에 담았습니다.이미 장바구니에 추가된 상품입니다.
장바구니로 이동하시겠습니까?