[면접 합격자료] SK그룹 SK텔레콤 Hadoop 합격 문항 기출 최종합격

1. Hadoop의 기본 구성 요소와 역할에 대해 설명하세요.

Hadoop은 대용량 데이터를 저장하고 처리하는 분산 컴퓨팅 프레임워크로서, 핵심 구성 요소는 HDFS, MapReduce, YARN, 그리고 Hadoop Common입니다. HDFS는 수백 테라바이트에서 페타바이트 규모의 데이터를 분산 저장하는 역할을 하며, 데이터 복제와 장애 복구 기능을 제공하여 데이터 안정성을 높입니다. MapReduce는 Hadoop의 핵심 처리 엔진으로, 대규모 데이터를 병렬로 처리할 수 있어 일례로 2xxx년 SK텔레콤이 빅데이터 분석에 활용하여 사용자 행동 분석 정확도를 95%까지 향상시킨 사례가 있습니다. YARN은 리소스 조정과 작업 스케줄링을 담당하여 클러스터 효율성을 극대화하며, 이를 통해 수천 대 서버를 효율적으로 활용할 수 있습니다. Hadoop Common은 위 구성요소들이 원활히 작동하도록 공통 라이브러리와 유틸리티를 제공하며, 이를 기반으로 SK그룹은 고객 데이터 분석과 서비스 최적화에 활용하여 연간 수백억 원의 비용 절감 효과를 거두고 있습니다. 전체 Hadoop 생태계는 특징적으로 확장성과 유연성이 뛰어나, 수많은 기업이 다양한 데이터 처리 요구를 충족시키기 위해 채택하고 있으며…