O'Reilly Media Delta Lake: Полное руководство. Современные архитектуры хранилищ данных с использованием Delta Lake

Краткое содержание:
В условиях стремительного роста больших данных и искусственного интеллекта организации могут быстро создавать цифровые продукты. Однако эффективность аналитики и моделей машинного обучения зависит от качества данных.
Особенности:
- Открытый формат Delta Lake предлагает надежную архитектуру lakehouse для облачных платформ, таких как Amazon S3, ADLS и GCS.
- Практическое руководство для инженеров данных, научных специалистов и аналитиков: научитесь запускать Delta Lake и использовать его функции.
- Узнайте, как выбор решения для хранения влияет на надежность и производительность данных, от необработанных данных до получения инсайтов.
Вы научитесь:
- Использовать современные методы управления данными и инженерии данных.
- Понимать, как транзакции ACID обеспечивают надежность больших данных на большом масштабе.
- Параллельно запускать потоковые и пакетные задачи на своем озере данных.
- Выполнять команды обновления, удаления и слияния.
- Использовать функции временной съемки для отката и анализа предыдущих версий данных.
- Создавать потоковую трубу данных с учетом качества, применяя архитектуру медальонов.