After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
코스 설명
데이터에 부정확하거나 의심스러운 기록이 있는지 걱정되지만, 어디서부터 시작해야 할지 모르시나요? 이상치 탐지 알고리즘이 도움이 될 수 있어요! 이상치 탐지는 비정상적인 데이터 포인트를 식별하기 위한 기법들의 모음으로, 금융 사기 탐지나 컴퓨터 네트워크의 악의적 활동을 파악하는 데 매우 중요합니다. 이 강의에서는 이상치를 찾기 위한 통계적 검정을 살펴보고, local outlier factor와 isolation forest 같은 정교한 이상치 점수화 알고리즘을 배우게 됩니다. 또한 UCI Wine quality 데이터셋에서 비정상적인 와인을 식별하고, 호르몬 수치의 이상으로 갑상샘 질환 사례를 탐지하는 데 이상치 탐지 알고리즘을 직접 적용해 볼 거예요.
사전 요구 사항
커리큘럼
코스 개요
1
통계적 이상치 탐지
이 장에서는 수치 요약과 그래프 요약을 사용해 데이터에 이상한 점이 있는지 비공식적으로 평가하는 방법을 배웁니다. Grubbs 검정이라는 통계적 절차를 사용해 특정 점이 이상치인지 확인하고, 시계열 데이터에서 이상치를 식별하는 데 도움이 되는 Seasonal-Hybrid ESD 알고리즘에 대해 알아봅니다.
2
거리·밀도 기반 이상치 탐지
이 장에서는 다변량 데이터에서 각 데이터 포인트에 연속적인 이상치 점수를 부여하는 데 사용되는 k-최근접 이웃 거리와 local outlier factor를 계산하는 방법을 학습합니다. 또한 국소 이상치와 전역 이상치의 차이를 이해하고, 두 알고리즘이 각각의 경우에 어떻게 도움이 되는지 알아봅니다.
3
Isolation forest
k-최근접 이웃 거리와 local outlier factor는 최근접 이웃의 거리나 상대 밀도를 이용해 각 점의 점수를 매깁니다. 이 장에서는 대안적인 트리 기반 접근법인 isolation forest를 살펴보는데, 이는 데이터를 무작위로 더 작은 영역으로 분할하며 점들이 얼마나 쉽게 분리되는지를 측정해 빠르고 견고하게 이상치를 탐지하는 방법입니다.
4
성능 비교
이제 여러 가지 이상치 점수화 알고리즘을 소개받았습니다. 마지막 장에서는 레이블이 있는 이상치가 제공되는 경우 알고리즘의 탐지 성능을 비교하는 방법을 배웁니다. 이상치 점수에 대한 정밀도(precision)와 재현율(recall) 지표를 계산하고 해석하는 법, 그리고 범주형 특성이 있는 데이터를 처리하도록 알고리즘을 조정하는 방법을 익히게 됩니다.
R
R로 시작하는 이상치 탐지 입문
코스
완료
