After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Opis kursu
Zbuduj solidne podstawy z Delta Lake
Ten kurs wyposaża Cię w umiejętności skutecznego zarządzania danymi w Databricks, wykorzystując narzędzia takie jak Delta Lake i Data Explorer Databricks. Poznasz podstawowe pojęcia, takie jak tabele zarządzane i niezarządzane oraz sposób, w jaki obsługują przechowywanie i cykl życia danych, a także zagłębisz się w zaawansowane funkcje Delta Lake, takie jak transakcje ACID, wymuszanie schematu i time travel. Techniki te zapewniają spójność i niezawodność danych, tworząc solidne podstawy dla wydajnych procesów pracy z danymi.Optymalizuj przepływy pracy za pomocą widoków i widoków tymczasowych
Nauczysz się także tworzyć i zarządzać widokami oraz widokami tymczasowymi, aby optymalizować procesy danych. Trwałe widoki pozwalają zapisywać logikę zapytań do wielokrotnego użycia między sesjami, usprawniając przepływy pracy i zwiększając efektywność. Widoki tymczasowe z kolei stanowią lekkie rozwiązanie do szybkich zadań specyficznych dla sesji. Praktyczne przykłady pokazują, jak każde z nich można zastosować, aby zwiększyć dostępność i organizację danych, czyniąc je nieocenionymi narzędziami do tworzenia wydajnych i elastycznych rozwiązań.Zabezpiecz i zarządzaj swoimi danymi z pewnością
Wreszcie wykorzystasz Data Explorer firmy Databricks do podglądu, analizy i zabezpieczania zbiorów danych. Od przypisywania właściciela tabeli po zarządzanie prawami dostępu zdobędziesz kompleksowe zrozumienie najlepszych praktyk w zakresie zarządzania. Szczególny nacisk położono na bezpieczne obchodzenie się z danymi osobowymi (PII) z wykorzystaniem strategii ukierunkowanych na zgodność z przepisami. Dzięki praktycznym ćwiczeniom zdobędziesz umiejętności potrzebne do utrzymywania bezpiecznych i zoptymalizowanych zbiorów danych, dzięki czemu Twoje dane pozostaną dostępne, dobrze zarządzane i chronione w każdej sytuacji.Wymagania wstępne
Program kursu
Plan kursu
1
Wprowadzenie do Delta Lake
Ten rozdział omawia zarządzanie tabelami w Databricks, ze szczególnym uwzględnieniem różnic między tabelami zarządzanymi i niezarządzanymi oraz sposobu, w jaki obsługują one przechowywanie danych i ich cykl życia. Dowiesz się, jak tworzyć i odświeżać trwałe widoki, oraz poznasz funkcje Delta Lake, takie jak transakcje ACID, wymuszanie schematu i cofanie się w czasie – kluczowe dla niezawodnego zarządzania danymi. Przyjrzysz się też bliżej mechanizmom organizacji danych i dostępu do nich w Databricks.
- Wprowadzenie do Delta Lake50 XP
- Niezawodność danych w Delta Lake50 XP
- Zapewnianie właściwości ACID100 XP
- Zarządzanie danymi w Delta Lake100 XP
- Optymalizacja tabel100 XP
- Trwałość i zakres tabel50 XP
- Tabele zarządzane i niezarządzane100 XP
- Pojedynek tabel50 XP
- Usuwanie tabel100 XP
- Tworzenie tabel niezarządzanych50 XP
2
Praca z tabelami w Databricks
Ten rozdział poświęcony jest tworzeniu widoków i tymczasowych widoków w Databricks oraz zarządzaniu nimi. Poznasz, jak trwałe widoki zapisują logikę zapytań do ponownego użycia w różnych sesjach, a tymczasowe widoki sprawdzają się w szybkich zadaniach ograniczonych do jednej sesji. Omówimy też praktyczne scenariusze, w których każdy z tych typów pomaga zwiększyć efektywność i uprościć obsługę danych.
3
Eksploracja danych i bezpieczeństwo
W ostatnim rozdziale dowiesz się, jak korzystać z narzędzia Data Explorer do podglądu, analizy i zabezpieczania zbiorów danych. Omówimy własność tabel, związane z nią obowiązki oraz najlepsze praktyki w zakresie zarządzania danymi. Przyjrzymy się także zarządzaniu prawami dostępu i bezpiecznemu przetwarzaniu danych osobowych (PII) – z uwzględnieniem strategii zgodności z przepisami i praktycznych ćwiczeń.
Zarządzanie danymi w Databricks
Kurs
ukończony
