본문/내용
1. 해당 포지션에 지원한 동기를 기술해주세요.
저는 데이터를 분석하는 사람보다 분석할 수 있는 상태의 데이터를 만드는 사람의 중요성을 경험하면서 Data Engineer를 목표로 하게 되었습니다. 처음 데이터 프로젝트를 수행했을 때는 모델을 고도화하고 예측 정확도를 높이는 것이 가장 어려운 부분이라고 생각했습니다. 그러나 실제로 프로젝트를 시작하자 가장 많은 시간을 사용한 것은 모델을 만드는 일이 아니었습니다. 서로 다른 형식으로 저장된 데이터를 통합하고, 빠진 값을 확인하고, 잘못된 형식을 수정하고, 같은 의미를 가진 값의 표현을 통일하는 일이었습니다. 모델링 단계에 도착하기 전부터 데이터의 신뢰성을 확보하지 못하면 어떤 분석 결과도 신뢰하기 어렵다는 사실을 체감했습니다.
특히 여러 출처의 데이터를 결합한 프로젝트에서 이러한 경험을 뚜렷하게 했습니다. 같은 고객을 의미하는 데이터라도 시스템마다 식별 방식이 달랐고 날짜와 범주형 변수도 서로 다른 형식으로 저장돼 있었습니다. 처음에는 분석 단계에서 필요할 때마다 데이터를 수정하는 방식으로 대응했습니다. 하지만 작업자가 달라질 때마다 처리 결과가 조금씩 달라졌고 …