이 강의들을 수강한 후, 전문적인 시각화와 대시보드를 자신 있게 만들 수 있게 되었습니다
Shoebur Rahman구매 담당자, Giz Bangladesh
강의 설명
이 강의에서는 Python에서 Spark를 사용하는 방법을 배워요! Spark는 대규모 데이터셋을 병렬로 처리하는 도구이며 Python과도 잘 통합돼요. PySpark는 이 모든 것을 가능하게 하는 Python 패키지예요. 이 패키지를 사용해 Portland와 Seattle의 항공편 데이터를 다뤄 보겠습니다. 데이터를 정리하고, 항공편 지연 여부를 예측하는 Machine Learning 파이프라인을 처음부터 끝까지 만들어 볼 거예요. 이제 Python 코드에 Spark를 더하고, 고성능 Machine Learning의 세계로 들어가 볼까요!
선수 과목
커리큘럼
강의 개요
1
PySpark 익히기
이 장에서는 Spark가 데이터를 어떻게 관리하는지, 그리고 Python에서 테이블을 읽고 쓰는 방법을 배워요.
2
데이터 조작하기
이 장에서는 Spark 세션에서 최적화된 데이터 쿼리를 제공하는 pyspark.sql 모듈을 살펴봐요.
3
Machine Learning 파이프라인 시작하기
PySpark에는 최신 Machine Learning 기능이 내장되어 있으며, 전체 Machine Learning 파이프라인을 만들기 위한 유틸리티도 제공돼요. 이 장에서 이러한 기능을 배워요.
4
모델 튜닝과 선택
마지막 장에서는 지금까지 배운 내용을 적용해 어떤 항공편이 지연될지 예측하는 모델을 만들어 볼 거예요.
PySpark 기초
강의
완료
