[면접 합격자료] LG전자 Big data 합격 문항 기출 최종합격

1. 빅데이터 분석을 위해 어떤 데이터 처리 도구나 플랫폼을 사용해본 경험이 있나요

빅데이터 분석을 위해 하둡과 스파크를 주로 사용해왔으며, 데이터를 수집하는 단계에서는 Apache Flume과 Kafka를 활용하였습니다. 예를 들어, LG전자 스마트 가전제품에서 발생하는 실시간 센서 데이터를 수집하여 Kafka로 전달한 후, 스파크 스트림을 이용해 실시간 이상 징후를 탐지하였으며, 그 정확도는 95% 이상으로 나타났습니다. 또한, Hadoop HDFS를 기반으로 저장된 대용량 데이터 세트에서 PySpark와 Hive를 활용해 고객 행동 분석을 수행했고, 이를 통해 맞춤형 마케팅 전략을 개발하여 캠페인 클릭률이 25% 증가하는 성과를 이뤄냈습니다. 분석 결과는 Tableau와 Power BI를 이용해 시각화하였으며, 이 과정에서 데이터 정제 작업을 통해 데이터 품질을 98% 이상 확보하였습니다. 또한, 클라우드 플랫폼인 AWS EMR과 Google Cloud DataProc를 병행 사용하여 유연성과 확장성을 높였으며, 일평균 처리 데이터량은 10TB 이상, 분석 처리 시간은 기존보다 30% 이상 단축하였습니다. 이러한 도구와 플랫폼을 활용한 경험은 복잡한 빅데이터 환경에서도 효율적이고 신속하게 …