MIT Sloan Management review Big Data (빅데이터 분석 및 활용 방법론)

1. Big Data란 무엇인가

빅데이터는 전통적인 데이터 처리 애플리케이션으로는 수집, 저장, 관리 및 분석하기 어려운 대량의 데이터 집합을 의미한다. 이 데이터는 방대한 양, 빠른 속도, 다양한 형식을 지닌다. 이러한 세 가지 특성은 `3V`로 표현된다. 첫 번째 V는 Volume, 즉 대량의 데이터를 의미한다. 현대 사회에서는 매일 생성되는 데이터의 양이 기하급수적으로 증가하고 있으며, 소셜 미디어, IoT(사물인터넷), 트랜잭션, 로그 파일 등에서 다양한 형태의 데이터가 수집되고 있다. 기업과 조직은 이 방대한 데이터 생태계 속에서 유용한 정보를 추출하고 의사결정을 최적화하는 데 관심을 가지게 되었다. 두 번째 V는 Velocity, 즉 데이터 생성 속도를 뜻한다. 오늘날의 데이터는 실시간으로 생성되고 있으며, 이를 통한 즉각적인 인사이트와 반응이 중요해지고 있다. 예를 들어, 금융 거래, 온라인 구매, 소셜 미디어 활동 등은 몇 초 단위로 데이터를 생성하고, 기업은 이 정보를 신속하게 분석하여 고객의 요구에 맞춰 서비스를 조정해야 한다. 이로 인해 데이터 수집뿐만 아니라, 데이터를 신속히 분석하고 활용하는 능력도 서비스 품질과 고객 만족도를 높이…