빅데이터의 특성은 다양한 데이터의 유형(Variety)과 계속 발생하는 데이터(Velocity)를 활용한다는 것을 포함한다

1. 빅데이터의 정의

빅데이터는 기존 데이터 처리 방식으로는 처리하기 어려운 방대한 양의 데이터 집합을 의미한다. 이는 대량의 데이터가 빠른 시간 내에 생성되고 저장되며 다양한 형식을 포함한다는 특징이 있다. 빅데이터는 데이터의 크기, 속도, 다양성의 세 가지 특성인 3V를 핵심으로 한다. 먼저, 크기(Volume)는 페타바이트(PB) 또는 엑사바이트(EB)에 달하는 데이터들을 의미하며, 예를 들어 2023년 기준 세계 데이터의 양은 연간 175제타바이트(1ZB 이상)로 추정된다. 둘째, 속도(Velocity)는 데이터가 실시간 또는 거의 실시간으로 생성되고 분석되어야 하는 요구를 의미하는데, 이는 금융 거래, 소셜 미디어, IoT 센서 등에서 감지될 수 있다. 예컨대, 페이스북에서 하루 동안 생성되는 데이터 양은 약 4백50억 개의 좋아요, 댓글, 사진과 동영상으로 구성되어 있으며 이를 실시간 분석하는 것이 중요하다. 셋째, 다양성(Variety)은 데이터가 구조화된 데이터뿐 아니라 비구조적 데이터(텍스트, 영상, 음성, 센서 데이터 등)를 포함함을 나타낸다. 예를 들어, 의료 분야에서는 환자의 건강 기록(구조화된 데이터), 의료 영상, 음성 기록, 실시간 센서 데이터 …