빅데이터 기술 동향 서술[보고서 제출용-논��형식]

Ⅰ. 서론
1990년대를 지나 21세기에 들어왿� 인터넷이 확산되면서 정보의 홍수로 불릴 정도로 무수한 정보의 시대에 살아가고 있다. 정보로 인해서 편리한 생활을 영위하지만 역으로 정형화된 형태의 데이터왿� 비정형화된 데이터가 무분별하게 많아져 개인정보유출 등의 인터넷 범죄가 급증하고 있는 추세이다. 이러한 정보의 홍수, 무분별한 정보의 급증을 통해 현재는 빅데이터라는 용어가 생겨났다. 그 배경으로는 개인화 서비스왿� SNS의 확산으로 기본 인터넷 서비스 환경이 재구성되었다. 검색과 포털위주였던 인터넷 서비스가 통신, 게임, 음악, 검색, 쇼핑 등의 영역에서 개인화 서비스왿� 소셜 네트워크 서비스를 제공하는 환경으로 바뀌었다.

그림 1. 데이터 변화 추이
정보통신 기술 시장조사 기관인 IDC 디지털 유니버스가 조사한 보고서에 따르면 전 세계 디지털 데이터양이 제타바이트(약 1조 기가 바이트)단위로 2년 마다 2배씩 증가해서 2020년에는 약 20제타바이트가 될 것이라고 한다. 특히 스마트폰의 보급으로 데이터가 매우 빠르게 축적되어 제타바이트 시대를 스마트 시대라고한다. 데이터양이 엄청나게 증가하여 기존의 데이터 저장•관리•분석 기법으로는 데이터를 처리하는데 한계가 있어 정보 기술의 패러다임도 같이 바뀌었다. 그리고 이는 빅데이터 용어를 등장시켰는데, 패러다임이 지능화왿� 개인화된 시대를 빅데이터 시대라고 한다. 특히 시스코는 2012년 글로벌 모바일 데이터 트래픽 전망 업데이트에서 2016년에는 세계 모바일 데이터 트래픽이 2011년 대비 18배 증가하여 10엑사바이트를 초과할 것이라고 전망했다.

그림2. 정보 통신 기술 발전에 따른 데이터의 변화 방향
하지만 이러한 빅데이터는 텍스트, 사진, 소리, 동영상 등과 같은 비정형 데이터이기에 여기서 의미 있는 정보나 지식을 얻기는 어렵다. 또한 정형화된 데이터를 처리하는 데 더 적합한 기존 데이터 수집 기술로는 수많은 비정형 데이터를 수집하고 통합하는 것은 사실상 불가능하다.