GS네오텍 Cloud-Solutions Architect (Data엔지니어) 자기소개서

1. 본인의 데이터 엔지니어링 관련 경험과 프로젝트 사례를 구체적으로 설명하십시오.

데이터 엔지니어로서 다양한 프로젝트를 수행하며 데이터 인프라 구축과 데이터 파이프라인 개발에 집중해 왔습니다. 가장 대규모 고객 행태 분석을 위한 데이터 웨어하우스 구축 프로젝트를 수행하였는데, 이 프로젝트에서는 고객이 발생시키는 로그 데이터를 수집, 저장, 처리하는 시스템을 설계하였습니다. 기존에는 여러 개별 데이터 저장소와 분석 도구를 사용하여 데이터를 통합하는 데 어려움이 있었는데, 이를 해결하기 위해 데이터 레이크 및 데이터 웨어하우스 아키텍처를 설계하였고, 클라우드 기반 스토리지와 데이터 파이프라인을 구축하였습니다. 이를 통해 데이터 처리 속도와 안정성을 높였으며, 실시간 분석이 가능하도록 스트림 데이터 처리 시스템도 도입하였습니다. 두 번째로, 광고 성과 분석 시스템을 위한 데이터 파이프라인을 개발한 경험이 있습니다. 대량 광고 클릭 데이터와 전환 데이터를 실시간으로 수집하여 저장하는 작업이었는데, Kafka와 Flink를 활용하여 데이터 플로우를 설계하였으며, 데이터가 수집되면 빠르게 처리하여 데이터베이스에 저장하…