본문/내용
1.지원 직무와 관련한 경력 및 경험 활동의 주요 내용과 본인의 역할에 대해서 구체적으로 기술해 주십시오
[데이터 엔지니어링의 실전 경험] 엔씨소프트에서 데이터 엔지니어로 근무하면서 대규모 데이터 파이프라인 설계와 구축을 담당하였습니다. 고객 행동 분석을 위해 일평균 50백만 건 이상의 이벤트 데이터를 수집, 저장하는 시스템을 설계하여 데이터 처리 속도를 기존 8배 향상시켰습니다. Hadoop, Spark, Kafka 등 오픈소스 도구를 활용하여 실시간 데이터 스트리밍과 배치 처리 시스템을 구축하였으며, 이에 따라 데이터 가용성을 9 99%까지 확보하였고, 데이터 처리 지연 시간을 평균 2초로 낮추었습니다. 대용량 데이터 압축 및 저장 효율성을 개선하기 위해 Parquet와 Arrow 포맷을 도입하여 저장 용량을 30% 절감하였으며, AWS 기반 클라우드 인프라 최적화를 통해 서버 운영 비용을 연간 약 20% 절감하는 성과를 이루었습니다. 데이터 품질 향상을 위해 ETL 자동화 파이프라인을 개발하고, 데이터를 실시간으로 모니터링하는 시스템을 도입하여 데이터 품질 이슈 발생률을 15%까지 낮췄으며, 이는 팀의 분석신뢰도를 높이는 계기가 되었습니다. 이러한 경…