SK그룹 SK텔레콤 Hadoop 자기소개서

1. Hadoop 관련 경험이나 프로젝트를 통해 얻은 가장 큰 성과와 그 과정을 구체적으로 서술하시오.

SK텔레콤에서 진행한 대규모 데이터 분석 프로젝트를 통해 Hadoop을 활용한 경험을 쌓아왔습니다. 해당 프로젝트는 고객 행동 분석을 통한 맞춤형 추천 시스템 구축이 목표였으며, 수집된 데이터는 고객 통화, 문자, 인터넷 사용 기록 등 방대한 양이었습니다. 이 데이터를 효과적으로 처리하고 분석하기 위해 Hadoop 생태계를 적극적으로 활용하였으며, 이를 통해 얻은 성과는 고객 이탈 방지와 신규 고객 유치에 큰 도움을 주었다고 생각합니다. 프로젝트 초기에 데이터를 수집하는 과정에서 여러 소스의 데이터를 Hadoop 분산 파일 시스템(HDFS)에 저장하는 작업이 중요했습니다. 논리적 데이터 구조 설계와 함께 데이터 정제 작업을 진행하였으며, 해당 과정에서 맵리듀스 프로그램을 직접 작성하는 경험이 많았습니다. 특히, 텍스트 데이터를 분석하는 과정에서 병렬 처리 방식을 활용하여 수백GB의 데이터를 몇 시간 만에 처리할 수 있었으며, 이를 통해 Hadoop의 강력한 분산 처리 능력을 체감할 수 있었습니다. 또한, 분석 단계에서는 Hive와 Pig를 적극 활용하여…