O'Reilly Media Эффективное веб-скрапинг с Python: практическое руководство по сбору данных с современных веб-ресурсов, с примерами кода и методами обработки

Изучите техники веб-скрапинга и краулинга для доступа к неограниченным данным из любых веб-источников в любом формате.

С этой практической книгой вы научитесь использовать скрипты Python и веб-API для сбора и обработки данных с тысяч — а может и миллионов — веб-страниц одновременно.

Подходит для программистов, специалистов по безопасности и веб-администраторов, знакомых с Python, эта книга не только обучает основам механики веб-скрапинга, но и углубляется в более сложные темы, такие как анализ сырых данных и использование скриптов для тестирования фронтенда веб-сайтов.

В книге представлены примеры кода, которые помогут вам понять концепции на практике.

• Научитесь парсить сложные HTML-страницы
• Перемещайтесь по нескольким страницам и сайтам
• Получите общее представление об API и принципах их работы
• Изучите несколько методов хранения собранных данных
• Скачивайте, читайте и извлекайте данные из документов
• Используйте инструменты и техники для очистки плохо отформатированных данных
• Читайте и пишите на естественных языках
• Взаимодействуйте с формами и входами
• Понимайте, как собирать данные из JavaScript
• Изучите обработку изображений и распознавание текста