CJ ENM 데이터 엔지니어링(데이터모델링) 자기소개서

1. 본인의 데이터 모델링 경험과 이를 통해 해결한 문제 사례를 구체적으로 서술하시오.

데이터 엔지니어로 일하면서 다양한 데이터 모델링 프로젝트를 수행하였으며, 그 중에서도 특히 고객 행동 분석과 추천 시스템 개발에 참여한 경험이 있습니다. 고객 행동 분석 프로젝트에서는 수많은 로그 데이터를 효율적으로 처리하고 분석하기 위해 데이터 구조를 설계하는 작업이 핵심이었습니다. 기존에는 로그 데이터가 비정형 형태로 저장되어 있어 분석에 어려움이 있었으며, 데이터의 정합성과 처리 속도 역시 문제로 제기되고 있었습니다. 이를 해결하기 위해 정제된 데이터 모델을 설계하기로 결심하였고, 먼저 로그 데이터를 정형화하고, 사용자, 세션, 액션, 상품 등의 엔티티로 구분하는 데이터 모델을 설계하였습니다. 이 과정에서 정규화와 비정규화의 균형을 고려하였으며, 자주 조회되는 데이터를 별도 테이블로 분리하여 조인 비용을 줄이도록 하였습니다. 또한, 실시간 분석을 위해 데이터 적재 파이프라인에도 변경을 가했으며, Kafka와 Spark를 활용하여 스트림 데이터를 빠르게 처리하도록 하였습니다. 이후 정제된 데이터를 데이터 웨어하우스로 적재하면…