4차 산업혁명의 ‘석유’ 빅데이터

지난 3월 구글 딥마인드의 인공지능(AI) 알파고와 이세돌 9단의 대결은 빅데이터가 인공지능과 결합했을 때 발휘하는 위력을 전 세계에 증명해 보였다. 바둑은 수학적 계산을 넘어 직관적 통찰이 필요하다는 점에서 인간만이 가능한 영역으로 여겨졌지만, 알파고는 총 16만건에 달하는 기본 데이터를 학습해 인간의 직관마저 모방할 수 있었다.

방대한 데이터를 분석해 새로운 가치를 찾아내고 미래를 예측하는 빅데이터는 4차 산업혁명의 ‘석유’로 불린다. 인공지능과 사물인터넷(IoT), 자율주행차 등 4차 산업혁명을 이끌 신기술들은 빅데이터와 맞물렸을 때 파급력을 발휘하기 때문이다. 또 금융과 쇼핑, 의료 등 거의 모든 영역에 걸쳐 획기적인 혁신을 가져다 준다는 점에서 미래 신산업의 보고(寶庫)로 떠오르고 있다. 시장조사업체 IDC는 빅데이터 시장 규모가 2019년까지 연평균 23.1%씩 성장해 486억 달러(약 53조 9000억원)에 이를 것이라고 전망했다.

모바일 시대가 열리며 실시간 데이터는 폭발적으로 증가했다. 소셜네트워크서비스(SNS)와 인터넷 포털 등에 실시간으로 누적되는 데이터는 이용자들의 소비 패턴이나 트렌드뿐 아니라 사회 현안과 여론 분석에까지 유용한 정보를 제공한다. 공공 데이터와 각종 통계자료, 검색사이트의 검색 로그도 빅데이터의 유용한 원천이다. 기업들은 이들 빅데이터를 활용해 개별 고객의 수요를 파악하고 마케팅에 활용한다. 세계 최대 동영상 스트리밍 기업인 넷플릭스와 세계 최대 온라인 상거래 기업인 아마존이 빅데이터에 기반해 개별 고객의 취향에 맞춘 주문형비디오(VOD)와 상품을 추천하는 게 대표적이다. IoT와 자율주행이 가져오는 초연결시대의 근간 역시 빅데이터이다. 스마트폰과 가전, 자동차 등 각각의 기기에서 수집된 데이터를 처리, 분석해 적절한 알고리즘을 찾아낼 때 초연결시대의 구현이 가능해진다.

공공 분야에서의 활용성도 무궁무진하다. 교통사고 기록과 실시간 교통 트래픽 등을 분석해 교통사고를 예측하거나 SNS에 나타난 청소년들의 심리를 파악해 자살을 예방하는 등의 공공정책 시스템이 세계 각국에서 구현되고 있다. 미국 행정부는 2012년 ‘빅데이터 이니셔티브’의 시동을 걸었다. 유전자 연구와 의료, 교육, 지구과학, 국방 등 공공영역의 거시 정책 수립에 정부가 보유한 공공데이터를 활용하기 위한 연구로 매년 2억 달러 이상을 투입한다.

김소라 기자 sora@seoul.co.kr