다양한 디지털 서비스, 폭증하는 디바이스, 센서 네트워크 등의 등장으로 디지털 데이터의 양과 종류는 엄청나게 증가하고 있습니다. IDC 에 따르면 2020년까지 디지털 데이터의 양은 연간 약 42%씩 증가할 것이라고 합니다. 구글의 수석 경제학자인 Hal Varian은 2010년부터 2020년까지 디지털 데이터의 양은 50배 이상으로 증가할 것이라고 합니다.

“인류 역사가 시작된 시점부터 2003년까지 인류가 생성한 데이터의 총량은 5엑사바이트에 불과합니다. 오늘날 인류는 5엑사바이트의 데이터를 2일만에 생성하고 있습니다. 2020년까지 지구상의 디지털 데이터는 약 53제타바이트에 이를 것입니다.” - Hal Varian, Chief Economist at Google

디지털 데이터의 폭발적인 증가는 새로운 가능성의 지평을 열게 되었습니다. 이전에는 기록하고 보관하여 분석의 대상이 되지 못했던 수많은 디지털 데이터가 가용해짐에 따라 인간사회의 더 많은 부분이 디지털의 영역으로 흡수되었습니다. 이러한 현상을 빅데이터 라고 하며, 21세기는 바로 빅데이터의 시대라고 해도 과언이 아닙니다.

본격적인 빅데이터 시대가 시작된 2000년 중반 이후 차별적인 경쟁력을 갖춘 기업들은 거의 모두 데이터 중심 조직 (Data-Driven Organization) 이었습니다. 2011년 MIT 논문 (Strength in Numbers : How Does Data-Driven Decisionmaking Affect Firm Performance?) 은 데이터 중심 조직의 전반적인 생산성이 5-6% 높다는 결과를 내어 놓기도 하였습니다.

이외에도 데이터 중심 조직의 차별적 경쟁력을 보여주는 연구결과는 어렵지 않게 찾아볼 수 있습니다. 이코노미스트에서 수행한 설문조사에 따르면 조직 내 데이터를 업계평균보다 효율적으로 활용하고 있다고 대답한 기업의 78%가 평균 이상의 경영 성과를 달성했다고 합니다.

그렇다면 데이터 중심 조직이란 무엇일까요? 데이터를 많이 보유하고 있고, 다양한 리포트를 생성해 활용하면 데이터 중심 조직일까요? 큰 예산을 들여 하둡이나 머신러닝 플랫폼을 갖추면 데이터 중심 조직일까요?

그렇지 않습니다. 데이터 중심 조직이란 데이터에 기반하여 과거와 현재를 정확히 직시하고, 데이터 속에 숨어있는 패턴으로부터 도출한 미래에 대한 객관적인 예측을 바탕으로 의사결정하는 문화가 정립된 조직을 의미합니다.

데이터에 기반한 의사결정이 왜 중요할까요? 간단히 말하자면 인간의 직관에 기반한 주관적 의사결정은 잘못될 가능성이 높기 때문입니다. 인간의 사고는 완벽하지 않습니다. 특히 빠르고 본능에 가까운 직관적인 판단은 여러 결함을 가지고 있습니다.

이러한 한계를 극복한 데이터 중심 조직은 의사결정의 무게추를 직관에서 데이터에 기반한 귀납적, 논리적 판단으로 이동시킵니다. 직급이 높고 경험이 많아 가장 많은 연봉을 받는 사람의 의견 (HiPPO : Highest Paid Person’s Opinion) 에 좌지우지되지 않기 위해 객관적인 평가지표를 만들고, 평가와 분석을 위한 왜곡없는 데이터를 다양하게 수집하고, 편향되지 않은 통계적 방법론을 적용해 올바른 인사이트를 도출합니다. 이러한 노력을 끊임없이 지향하는 조직이 바로 데이터 중심 조직이며, 데이터 중심 조직이 되는 것이야말로 21세기 모든 기업들이 지향해야 하는 목표입니다.

데이터 중심 조직을 이루는 요소는 크게 세 가지로 볼 수 있습니다.