Парсинг с помощью Python. Веб-скрапинг в действии. 3-е межд. изд.

Парсинг с помощью Python. Веб-скрапинг в действии Если программирование — магия, то веб-скрапинг — настоящее колдовство. Написав простую автоматизированную программу, можно отправлять запросы веб-серверам, получать ответы с данными, а затем анализировать эти данные и извлекать необходимую информацию. Это обновленное третье издание книги не только познакомит вас с веб-скрапингом, но и послужит исчерпывающим руководством по сбору практически любых видов данных в современном Интернете. В части I основное внимание уделено механике веб-скрапинга: как с помощью Python отправлять запросы веб-серверам, обрабатывать ответы и автоматизировать взаимодействие с сайтами. В части II исследуются более конкретные инструменты и приложения, которые пригодятся при любом сценарии веб-скрапинга. Книга покажет, как: • анализировать сложные HTML-страницы; • разрабатывать веб-сканеры с помощью фреймворка Scrapy; • хранить данные, полученные с помощью скрапинга; • читать и извлекать данные из документов; • очищать и нормализовывать плохо отформатированные данные; • читать и записывать информацию на естественных языках; • выполнять поиск по формам и страницам входа; • выполнять скрапинг JavaScript-кода и работать с API; • писать и использовать программы для преобразования изображений в текст; • обходить противоскрапинговые ловушки и блокаторы ботов; • тестировать свои веб-сайты с помощью скрапинга.

1. Всеобъемлющее руководство: книга охватывает все аспекты веб-скрапинга, от основ до продвинутых тем, включая базы данных, веб-серверы, HTTP, HTML и интернет-безопасность.
2. Практическая направленность: включает множество примеров кода и пошаговых инструкций, которые помогут сразу начать применять полученные знания на практике.
3. Актуальные библиотеки и методики: подробное руководство по использованию популярных библиотек и современных методик, необходимых для создания эффективных веб-скраперов.
4. Универсальность: полезна как для начинающих, так и для более опытных пользователей Python, предлагая объяснения сложных аспектов и ссылки на дополнительные материалы для более глубокого изучения.
5. Любопытство: веб-скрапер позволит вам заглянуть в места, недоступные обычным поисковым системам.