После прохождения этих курсов я уверенно создаю профессиональные визуализации и дашборды.
Shoebur RahmanСпециалист по закупкам, Giz Bangladesh
Описание курса
В этом курсе вы научитесь использовать Spark из Python! Spark — это инструмент для параллельных вычислений с большими наборами данных, который отлично интегрируется с Python. PySpark — это Python-пакет, который делает всё это возможным. Вы будете работать с данными о рейсах из Портленда и Сиэтла: научитесь обрабатывать эти данные и построите полноценный пайплайн машинного обучения для предсказания задержек рейсов. Приготовьтесь освоить Spark в Python и погрузиться в мир высокопроизводительного машинного обучения!
Предварительные требования
Программа
План курса
1
Знакомство с PySpark
В этой главе вы узнаете, как Spark управляет данными, а также научитесь читать и записывать таблицы из Python.
2
Работа с данными
В этой главе вы познакомитесь с модулем pyspark.sql, который обеспечивает оптимизированные запросы к данным в вашей сессии Spark.
3
Первые шаги с пайплайнами машинного обучения
PySpark включает встроенные современные алгоритмы машинного обучения, а также инструменты для построения полноценных пайплайнов машинного обучения. Вы изучите их в этой главе.
4
Настройка и выбор модели
В последней главе вы применените полученные знания и создадите модель, которая предсказывает задержки авиарейсов.
Основы PySpark
Курс
завершён
