Python Tutorial - Google Scraper Thousands of URLs in Seconds

Опубликовано: 20 Апрель 2013
на канале: kholidfu
11,700
14

In this video, I will show you how to scrape thousands of google search results in a matter of seconds. The main script (retriever-multi.py) I've got from SO forum, then I built a simple script (reader.py) to parse the result using re and beautifulsoup module then print the result to the screen.

For this example I scrape 10 pages of google search result, each page contains 100 results.

Combined with good proxy management, you will have a powerful scraper in Python.


Смотрите видео Python Tutorial - Google Scraper Thousands of URLs in Seconds онлайн без регистрации, длительностью часов минут секунд в хорошем качестве. Это видео добавил пользователь kholidfu 20 Апрель 2013, не забудьте поделиться им ссылкой с друзьями и знакомыми, на нашем сайте его посмотрели 11,700 раз и оно понравилось 14 людям.