경제금융용어 700선 : 빅데이터

빅데이터(big data)란 복잡하고 다양한 대규모 데이터세트 자체는 물론 이 데이터세트로부터 정보를 추출하고 결과를 분석하여 더 큰 가치를 창출하는 기술을 뜻한다.

 

수치 데이터 등 기존의 정형화된 정보뿐 아니라 텍스트 이미지 오디오 로그기록 등 여러 형태의 비정형 정보가 데이터로 활용된다. 최근 모바일기기와 SNS 이용 보편화, 사물인터넷 확산 등으로 데이터의 양이 기하급수적으로 늘어나고 있다.

 

하지만 저장매체의 가격 하락 등으로 데이터 관리비용이 감소하고, 클라우드 컴퓨팅 등으로 데이터 처리 분석 기술도 발전하면서 빅데이터 활용 여건은 계속 개선되어가고 있다. 빅데이터 관련 기술은 데이터를 수집 저장하는 데이터 ‘처리기술’과 데이터를 분석 시각화하는 데이터 ‘분석기술’로 구성된다.

 

데이터 처리기술의 발달은 저가의 서버와 하드디스크를 여러 대 연결하여 대용량 데이터를 분산 처리함으로써 기존의 고비용 데이터 분석 솔루션을 대체하였다. 데이터 분석기술의 발달은 기존 데이터 분석에서는 불가능했던 비선형적 상관관계 규명, 감성분석 등 비정형화된 분석도 가능하게 만들었다. 여기서 감성분석은 텍스트 채굴(text mining) 기술의 하나로 텍스트(예 : 상품 품평)에 나타난 사람들의 태도 의견 성향 등 주관적인 속성을 지닌 데이터 추출 분석기법이다.

 

이처럼 빅데이터는 대량(high-volume), 초고속(high-velocity), 고다양성(high-variety), 고가변성(high-variability)의 특성을 지니며 고정확성(high-veracity)을 확보해야하는 정보 자산이다.