본문/내용
1. BIG DATA란
빅데이터란 대용량의 데이터 집합을 의미하며, 일반적으로 이러한 데이터는 전통적인 데이터 처리 소프트웨어로는 수집, 저장, 관리 및 분석하기 힘든 규모와 다양성을 가진다. 빅데이터는 데이터의 양, 속도, 다양성, 정렬성, 신뢰성 등을 특징으로 하고 있으며, 이러한 특성은 흔히 ‘5V’로 요약된다. 데이터의 양은 간단하게 말해 데이터의 총량을 의미하며, 소셜 미디어, IoT 기기, 거래 기록 등에서 생성되는 막대한 양의 데이터가 여기에 해당된다. 데이터의 속도는 데이터가 생성되고 처리되는 속도를 나타내며, 이는 실시간 데이터 스트리밍과 관련이 깊다. 예를 들어, 금융 거래에서의 데이터 처리나 소셜 미디어 업데이트는 빠른 속도로 이루어지며, 이를 신속하게 분석하는 것이 중요하다. 데이터의 다양성은 데이터가 구조화된 것뿐만 아니라 비구조화된 형태로도 존재한다는 점을 강조한다. 텍스트, 이미지, 오디오, 비디오 등의 다양한 형식의 데이터가 포함되어 있으며, 이러한 다양한 데이터소스를 통합하여 가치를 생성하는 것이 빅데이터 분석의 핵심이다. 정렬성은 데이터가 생성된 맥락과 관계를 이해하는 것과 관련이 있다. 신뢰성은 …