After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Описание курса
Создайте прочную основу с Delta Lake
Этот курс даст вам навыки эффективного управления данными в Databricks с использованием таких инструментов, как Delta Lake и Data Explorer Databricks. Вы познакомитесь с базовыми понятиями, такими как управляемые и неуправляемые таблицы, а также с тем, как они управляют хранением и жизненным циклом, одновременно изучая продвинутые возможности Delta Lake, включая транзакции ACID, контроль схемы и time travel. Эти методы обеспечивают согласованность и надежность данных, закладывая основу для надежных рабочих процессов с данными.Оптимизируйте рабочие процессы с помощью представлений и временных представлений
Вы также научитесь создавать и управлять представлениями и временными представлениями для оптимизации процессов обработки данных. Постоянные представления позволяют сохранять логику запросов для повторного использования между сеансами, упрощая рабочие процессы и повышая эффективность. С другой стороны, временные представления предлагают лёгкое решение для быстрых задач, привязанных к сеансу. Практические примеры показывают, как каждый из них можно применять для повышения доступности и организации данных, делая их незаменимыми инструментами для создания эффективных и гибких решений.Обеспечьте безопасность и управление своими данными с уверенностью
Наконец, вы научитесь использовать Data Explorer Databricks для предварительного просмотра, анализа и защиты наборов данных. От назначения владельцев таблиц до управления правами доступа вы получите всестороннее понимание лучших практик управления. Особое внимание уделяется безопасной обработке персональных идентифицируемых данных (PII) с использованием стратегий, ориентированных на соблюдение требований. Благодаря практическим упражнениям вы освоите навыки поддержки безопасных и оптимизированных наборов данных, обеспечивая их доступность, эффективное управление и защиту в любой ситуации.Предварительные требования
Программа
Структура курса
1
Введение в Delta Lake
В этой главе рассматривается управление таблицами в Databricks: различия между управляемыми и неуправляемыми таблицами, а также особенности их хранения и жизненного цикла. Вы научитесь создавать и обновлять постоянные представления, а также познакомитесь с возможностями Delta Lake — ACID-транзакциями, контролем схемы и перемещением во времени — для надёжного управления данными. Кроме того, вы получите более глубокое понимание механизмов организации данных и доступа к ним в Databricks.
- Введение в Delta Lake50 XP
- Надёжность данных в Delta Lake50 XP
- Обеспечение свойств ACID100 XP
- Управление данными в Delta Lake100 XP
- Оптимизация таблиц100 XP
- Постоянство и область видимости таблиц50 XP
- Управляемые и неуправляемые таблицы100 XP
- Сравнение таблиц50 XP
- Удаление таблиц100 XP
- Создание неуправляемых таблиц50 XP
2
Работа с таблицами в Databricks
В этой главе рассматривается создание представлений и временных представлений в Databricks и управление ими. Вы узнаете, как постоянные представления сохраняют логику запросов для повторного использования между сессиями, а временные представления подходят для быстрых, сессионно-ориентированных задач. Также разбираются практические сценарии, в которых каждый тип представлений помогает повысить эффективность и упростить обработку данных.
3
Исследование данных и безопасность
В заключительной главе вы изучите, как использовать Data Explorer для просмотра, анализа и защиты наборов данных. Рассматриваются вопросы владения таблицами, связанные с этим обязанности и лучшие практики управления данными. Отдельное внимание уделяется управлению правами доступа и безопасной работе с персональными данными (PII) с использованием стратегий, ориентированных на соответствие требованиям, и практических упражнений.
Управление данными в Databricks
Курс
завершён
