After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
코스 설명
데이터 엔지니어링의 기초를 이해하기
이 강의에서는 데이터 엔지니어의 핵심 책임, 데이터 과학자와의 차이점, 그리고 조직 내 데이터 흐름을 원활하게 만드는 방법을 배우게 됩니다. 실습 중심의 연습을 통해 가상의 음악 스트리밍 회사 Spotflix를 따라가며 데이터 엔지니어가 데이터를 수집, 정제, 카탈로그화하는 방법을 이해하게 됩니다.
개인 사례에 적용하기
강의가 끝날 무렵에는 회사의 데이터 엔지니어가 어떤 일을 하는지 이해하고, 데이터 엔지니어와 대화를 나눌 준비가 되어 있으며, 직접 데이터 엔지니어 여정을 시작할 탄탄한 기초를 갖추게 됩니다.
사전 요구 사항
이 코스에는 사전 요구 사항이 없습니다
커리큘럼
코스 개요
1
데이터 엔지니어링이란?
이 장에서는 데이터 엔지니어링이 무엇인지와 데이터 엔지니어에 대한 수요가 왜 증가하고 있는지에 대해 배웁니다. 그 다음 데이터 엔지니어링이 데이터 과학 라이프사이클에서 어디에 위치하는지, 데이터 엔지니어가 데이터 과학자와 어떻게 다른지 알아보고, 완전한 데이터 파이프라인을 처음으로 만나봅니다.
2
데이터 저장하기
데이터 엔지니어의 주요 업무 중 하나인 데이터 저장에 대해 알아볼 시간입니다. 이번 장에서는 데이터 엔지니어가 다양한 데이터 구조를 관리하는 방법과 데이터 쿼리 및 저장의 표준 프로그래밍 언어인 SQL을 활용하는 방법, 데이터 레이크와 데이터 웨어하우스를 이용해 적절한 데이터 저장 솔루션을 구현하는 방법을 배웁니다.
3
데이터 이동 및 처리하기
데이터 엔지니어는 단계별로 다양한 처리 기법을 활용하여 원시 데이터를 분석에 적합한 형태로 준비해 데이터 과학자의 업무를 수월하게 합니다. 이러한 단계를 결합해 파이프라인을 만들어야 하는데, 이때 자동화가 핵심적인 역할을 합니다. 또한, 데이터 엔지니어는 병렬 컴퓨팅과 클라우드 컴퓨팅을 활용해 파이프라인을 원활하게 운영합니다.
R
데이터 엔지니어링의 이해
코스
완료
