[면접 합격자료] 선진 데이터 분석 및 인공지능(딥러닝) 합격 문항 기출 최종합격

1. 데이터 분석 프로젝트에서 데이터를 수집하고 전처리하는 과정을 설명해주세요.

데이터 분석 프로젝트에서 데이터를 수집하는 과정은 다양한 방법으로 진행됩니다. 공개 데이터셋, 웹 크롤링, API 활용, 내부 데이터베이스 이용 등을 통해 필요한 데이터를 확보합니다. 예를 들어, 고객 행동 분석 프로젝트에서는 웹 로그 데이터 10TB를 수집하였으며, API를 통해 실시간 금융 거래 데이터를 1억 건 이상 수집하였습니다. 이후 수집한 데이터를 정제하는 전처리 과정이 중요합니다. 누락값, 이상치, 중복 데이터를 제거하며, 결측값은 평균 또는 중앙값 대체, 이상치는 IQR이나 Z-score를 활용하여 제거 또는 수정합니다. 텍스트 데이터의 경우 토큰화, 불용어 제거, 표준화 작업을 수행하였으며, 수치 데이터는 정규화 또는 표준화를 실시하여 모델 학습에 적합하게 만듭니다. 이 과정에서 데이터의 품질이 높아지고, 모델의 예측 성능이 최대 15% 향상된 사례도 존재합니다. 또한, 데이터의 분포를 파악하기 위해 히스토그램, 박스플롯, 상관관계 분석을 통해 특징들 간의 연관성을 확인하여 후속 분석 과정에 활용합니다. 이와 같은 체계적인 수집과 전처리 과정을 …