필자가 웹 스크레이핑에 대해 이야기할 때마다 항상 이렇게 묻습니다. "구글 같은 기업은 어떻게 만들어지나요?" 필자의 대답은 항상 같습니다."첫째, 수십억 달러를 모아 세계에서 가장 훌륭한 데이터센터를 만들고 세계 곳곳에 배치합니다.""둘째, 웹 크롤러를 만듭니다."