본문/내용
1.지원 직무와 관련한 경력 및 경험 활동의 주요 내용과 본인의 역할에 대해서 구체적으로 기술해 주십시오
[데이터 기반 문제 해결 전문가] 엔카닷컴에서 데이터 엔지니어로 근무하면서 대규모 데이터 파이프라인 구축과 최적화에 집중하였습니다. 고객 행동 데이터를 수집·처리하는 시스템을 개발하며 연간 50억 건 이상의 자동차 검색, 조회, 문의 데이터를 실시간으로 처리하고 있습니다. 기존 시스템의 처리 속도가 초당 1만 건에 불과했으나, ETL 프로세스와 스트리밍 처리 기술을 도입하여 처리 속도를 3배 이상 향상시켰고, 데이터 가용성을 높이기 위해 Kafka와 Spark를 활용한 분산 시스템을 구축하였습니다. 또한, 데이터 적재 및 분석을 위한 데이터 웨어하우스 설계와 설계 표준화를 담당하여 데이터 품질을 유지하는 동시에 분석 적시성을 확보하였으며, 이를 통해 내부 분석 보고서 작성 시간이 기존보다 40% 단축되었습니다. 클라우드 환경에서의 서버리스 아키텍처를 도입하여 인프라 모니터링 및 비용 최적화를 진행, 월간 인프라 운영 비용을 20% 절감하는 성과도 거두었습니다. 신규 데이터 파이프라인 개발 시 데이터 품질 검증 자동화 도구를 …