Введение в Spark с sparklyr на R

Изучите преимущества R, Spark и sparklyr

R в первую очередь оптимизирован для того, чтобы вы могли быстро и понятно писать код для анализа данных. Apache Spark предназначен для быстрого анализа огромных наборов данных. Пакет sparklyr позволяет писать код dplyr на R, который выполняется в кластере Spark, объединяя лучшее из обоих миров. Этот 4-часовой курс научит вас работать с Spark DataFrame как через интерфейс dplyr, так и через нативный интерфейс Spark, а также познакомит с методами машинного обучения.

Загружайте данные в Spark и работайте с DataFrame в Spark

Вы начнёте этот курс по Spark с изучения того, как Spark и R эффективно работают вместе, а также с практики загрузки данных, чтобы подготовить их к очистке, преобразованию и анализу. Вы будете использовать фреймы Spark и синтаксис dplyr для работы с данными: фильтровать и упорядочивать строки, а также изменять и суммировать столбцы.

Погрузитесь в анализ больших данных с Spark MLib

Этот курс направлен на развитие ваших навыков и уверенности в анализе огромных наборов данных. В последних главах вы познакомитесь с возможностями Spark для преобразования данных в машинном обучении и получите возможность попрактиковаться в процедурах машинного обучения sparklyr, используя их для построения прогнозов с помощью градиентного бустинга деревьев и случайных лесов. "