본문/내용
1.지원 직무와 관련한 경력 및 경험 활동의 주요 내용과 본인의 역할에 대해서 구체적으로 기술해 주십시오
[데이터 혁신의 주인공] LG생활건강의 데이터 엔지니어로서 안정적이면서도 확장 가능한 데이터 파이프라인 구축에 집중하였으며, 고객 만족과 시장 분석을 위한 핵심 데이터 인프라를 담당하였습니다. 데이터 수집 단계에서는 매일 발생하는 고객 행동 데이터 50만 건 이상을 실시간으로 수집하고 Kafka와 Flink를 이용하여 스트리밍 파이프라인을 구축하였으며, 처리 속도를 기존 대비 30% 향상시켜 실시간 분석 가능성을 높였습니다. 데이터 저장 및 관리에서는 Hadoop과 user-defined 스키마를 활용하여 데이터 웨어하우스 시스템을 설계하였고, 데이터 정합성 확보를 위해 Spark와 SQL을 통해 ETL 과정을 최적화하여 일평균 10TB 규모의 데이터를 안정적으로 저장, 관리하였습니다. 이를 통해 고객 세그먼트 분석 정확도를 기존 78%에서 92%로 향상시켰으며, 신규 제품별 시장 점유율 분석에서도 기존보다 빠른 2배 이상의 분석 속도를 달성하였습니다. 또한, 데이터 품질 향상 프로젝트의 일환으로 데이터 검증 업무를 담당하며, 데이터 정합률을 96%에서 9 …