O'Reilly Media Автоматизированный мониторинг качества данных: масштабируемое управление с машинным обучением для повышения эффективности

Современные компании обрабатывают около 2.5 квинтиллионов байт данных ежедневно. Как гарантировать, что эти данные высокого качества?

Эта практическая книга поможет обеспечить надежность данных. Большинство инженеров по данным и аналитиков достаточно заботятся о качестве, но часто им не хватает ресурсов и времени на разработку эффективного решения.

Авторы Джереми Стэнли и Пейдж Шварц из Anomalo описывают, как использовать автоматизированный мониторинг качества данных:

• Эффективное покрытие всех таблиц
• Прогрессивный оповещения о каждой категории проблем
• Немедленное решение возникающих проблем

Книга научит вас:

• Понимать важность качества данных
• Оценивать модели без наблюдения для обнаружения проблем
• Реализовывать уведомления для быстрого реагирования на проблемы
• Интегрировать мониторинг качества данных с другими системами
• Понимать пределы автоматизации и способы их преодоления
• Управлять мониторингом на долгосрочной основе