Depois de fazer esses cursos, sinto-me confiante para criar visualizações e painéis profissionais
Shoebur RahmanEspecialista em compras, Giz Bangladesh
Descrição do curso
Neste curso, você aprenderá a usar o Spark no Python! O Spark é uma ferramenta para fazer computação paralela com grandes conjuntos de dados e se integra bem ao Python. O PySpark é o pacote Python que faz a mágica acontecer. Você vai usar esse pacote para trabalhar com dados de voos de Portland e Seattle. Você vai aprender a preparar esses dados e criar um pipeline completo de aprendizado de máquina para prever se os voos sofrerão atrasos ou não. Prepare-se para colocar um pouco de brilho em seus códigos Python com o Spark e mergulhar no mundo do aprendizado de máquina de alto desempenho!
Pré-requisitos
Programa de estudos
Conteúdo do curso
1
Visão geral do PySpark
Neste capítulo, você aprenderá como o Spark gerencia dados e como você pode ler e gravar tabelas no Python.
- Afinal, o que faz o Spark?50 XP
- Como usar o Spark no Python50 XP
- Análise do SparkContext100 XP
- Uso de DataFrames50 XP
- Como criar uma SparkSession100 XP
- Exibição de tabelas100 XP
- Curioso para fazer consultas?100 XP
- Como pandificar um DataFrame do Spark100 XP
- Use o Spark para dar brilho aos dados100 XP
- Chega de intermediários100 XP
2
Manipulação de dados
Neste capítulo, você aprenderá sobre o módulo pyspark.sql, que disponibiliza consultas de dados otimizadas à sua sessão do Spark.
3
Introdução a pipelines de aprendizado de máquina
O PySpark tem rotinas de aprendizado de máquina de ponta integradas, além de utilitários para criar pipelines completos de aprendizado de máquina. Você aprenderá sobre eles neste capítulo.
4
Ajuste e seleção de modelos
Neste último capítulo, você aplicará o que aprendeu para criar um modelo capaz de prever quais voos sofrerão atrasos.
Fundamentos do PySpark
Curso
concluído
