컴퓨팅 - 빅데이터에 대해서

1. 빅데이터 개념과 정의

빅데이터는 기존의 데이터 처리 방법으로는 분석하거나 활용하기 어려운, 방대한 양의 정형 및 비정형 데이터를 의미한다. 이는 수집되는 데이터의 양이 엄청나게 많아지면서 발생하는 문제와 동시에 제공하는 기회를 포함한다. 빅데이터의 개념은 데이터의 규모, 속도, 다양성이라는 3V로 설명되며 이때 양을 의미하는 Volume, 속도를 의미하는 Velocity, 다양성을 나타내는 Variety가 중요하게 작용한다. 예를 들어, 소셜 미디어 플랫폼에서는 하루 동안 수십억 개의 트윗, 페이스북 게시물, 인스타그램 사진이 생성되고 있으며, 이러한 데이터들은 정형적 구조를 갖추지 않은 비정형 데이터로서 분석이 어렵다.

현대 사회에서는 모바일 기기, 사물인터넷(IoT) 기기, 센서, 온라인 거래 기록 등 다양한 채널을 통해 데이터가 끊임없이 생성되고 있으며, 전 세계적으로 하루에 생성되는 빅데이터의 양은 2023년 기준 약 175제타바이트(Zettabytes)에 달할 것으로 추정된다. 이는 2xxx년대 초반과 비교해 50배 이상 증가한 수치로, 기술 발전과 인터넷 사용자 수의 급증이 주된 원인이다. 빅데이터는 금융, 의료, 제조, 유통, 공공 안전 등 …