빅데이터 기초 모델링 5장 - 모델용 샘플링

1. 지난 과제 체크

지난 과제 체크는 빅데이터 모델링에 있어 중요한 단계를 차지한다. 먼저, 과제가 어떤 주제로 이루어졌는지 명확히 인지하는 것이 필요하다. 이를 통해 필요한 데이터의 종류와 특성을 파악할 수 있으며, 이는 후속 데이터 수집 및 모델링 작업에 큰 영향을 미친다. 지난 과제를 다룰 때는 주제와 목표를 명확히 이해하고 있어야 한다. 그 다음으로는 사용된 데이터 세트를 재검토해야 한다. 데이터를 수집하고 준비하는 과정에서 발생했을 수 있는 문제들을 살펴보는 것이 중요하다. 데이터의 품질, 결측값, 이상치 등 기존 데이터의 특성을 확인함으로써 현재 진행 중인 분석이나 모델링 과정에서의 신뢰성을 높일 수 있다. 데이터가 잘 준비되어 있지 않다면, 이는 모델의 예측 성능에 결정적인 영향을 미칠 수 있기 때문에 양과 질 모두를 체크해야 한다. 모델링 과정에서 사용된 기법과 방법론을 다시 살펴봐야 한다. 어떤 알고리즘이 적용되었는지, 각 알고리즘의 매개변수 설정이 적절했는지를 평가할 필요가 있다. 또한, 과제 수행 중 어떤 평가 지표를 사용하여 모델의 성능을 측정했는지도 확인하는 것이 중요하다. 정확도, 재현율, F1 점수 …