Якщо програмування нагадує магію, то веб-скрапінг — це справді потужне чаклунство. Написавши просту автоматизовану програму, можна надсилати запити на веб-сервери, отримувати з них дані, а потім аналізувати їх і витягувати необхідну інформацію. Нове розширене видання книги не тільки знайомить із веб-скрапінгом, а й допоможе зібрати будь-які дані в сучасному Інтернеті.

У частині I основну увагу приділено механіці веб-скрапінгу: як за допомогою Python запитувати інформацію з веб-сервера, здійснювати базову обробку серверної відповіді та організувати автоматизовану взаємодію з сайтами. У частині II досліджено більш специфічні інструменти та додатки, які стануть у нагоді в будь-якому сценарії веб-скрапінгу.

- Розбирайте складні HTML-сторінки.

- Розробляйте пошукові роботи за допомогою фреймворку Scrapy.

- Вивчайте методи зберігання даних, отриманих за допомогою скрапінгу.

- Зчитуйте та витягуйте дані з документів.

- Очищайте та нормалізуйте дані з неправильним форматуванням.

- Читайте та записуйте інформацію природними мовами.

- Опануйте пошук за формами та логінами.

- Вивчіть скрейпінг на JavaScript та роботу з API.

- Використовуйте та пишіть програми для перетворення зображень у текст.

- Навчіться обходити скрейпінгові пастки та блокатори ботів.

- Протестуйте власний сайт за допомогою скрейпінгу.

2-ге міжнародне видання.