NICE평가정보 데이터 엔지니어(데이터 입수 파트) 자기소개서

1. 데이터 입수 파트에서 본인이 수행했던 업무 경험과 역할에 대해 구체적으로 기술해 주세요.

데이터 입수 파트에서 다양한 업무를 수행하며 데이터 수집과 정제, 검증 작업을 담당하였습니다. 먼저 고객정보와 관련된 여러 소스에서 데이터를 수집하는 업무를 수행하였으며, 데이터의 신뢰성과 품질을 확보하기 위해 출처별 특성을 파악하고 적절한 수집 방식을 설계하였습니다. 이를 위해 데이터 공급처와 긴밀히 협업하였으며, API 연동 및 배치파일 자동 수집 시스템을 구축하여 수작업을 최소화하였습니다. 또한, 수집된 데이터 중 중복 제거와 누락 데이터를 파악하여 정제하는 작업도 담당하였으며, 이를 위해 데이터 적합성 검증 로직과 정제 프로세스를 개발하였습니다. 이 과정에서 데이터 분산 저장 시스템인 데이터레이크와 웨어하우스에 데이터를 적재하는 작업도 병행하였으며, 데이터 통합 및 표준화를 통해 일관된 데이터셋을 유지하는 역할도 수행하였습니다. 아울러, 수집하는 데이터의 신뢰성을 높이기 위해 원본 데이터와 수집 결과를 비교 분석하는 검증 작업도 실시하였으며, 실시간 모니터링 시스템을 도입하여 수집 오류 발생 시 빠르게 대응할…