스몰데이터의 정의
어떤 문제를 인식하고 확인하고 해결하는 데 필요한 최소량의 데이터를 일반적으로 스몰데이터라고 합니다.[1]
압도적인 양의 데이터, 빅데이터를 통해 인공지능은 놀라운 지능을 선보이고 기업은 이를 통해 기업의 솔루션을 얻거나 고객에게 양질의 맞춤형 서비스를 제공하면서 발전해나가고 있습니다.
하지만 빅데이터가 해낼 수 있는 일은 이렇게 놀라우면서도, 마냥 장점만을 가지고 있는 것은 아닙니다.
수많은 데이터를 활용함에 있어 따르는 개인정보 문제는 물론이고, 의외로 환경적인 부분에서도 문제가 있는 것이 빅데이터입니다. 글로벌 ITC 주간동향리포트(22년 2월 4주차)에 실려있는 내용에 따르면, '월드와이드웨이스트(World Wid Waste)'의 저자인 제리 맥거번(Gerry McGovern)은 데이터센터를 유지하기 위해 냉각 시스템에 쓰이는 물만 데이터센터 하나당 하루에 수백만 갤런의 물을 소비하는 것으로 추정된다고 설명합니다.
이러한 빅데이터의 문제점과 한계점을 해결하기 위해 인공지능에서 새롭게 주목받고 있는 것이 스몰데이터입니다.
빅데이터 vs 스몰데이터
빅데이터(Big Data)는 개인의 데이터를 분석해서 특정 타겟층을 만들어내지만, 스몰 데이터(Small Data)는 이용자 개개인의 취향, 기호, 소비 성향 등을 세부적으로 파악한다.
출처 : 코딩월드뉴스(https://www.codingworldnews.com)
빅데이터는 수많은 데이터에서 공통점을 찾아냅니다. 가장 수많은 사람의 선호, 불편 등의 의견을 담는 것이 빅데이터입니다.
이에 반해 스몰데이터는 오히려 더 다양한 결과값을 가져온다는 점에서 빅데이터와 다른 결과를 가집니다.[2]
빅데이터가 해결하지 못한 것을 해결한 스몰데이터의 사례를 보면 둘의 차이를 확연히 알 수 있습니다.
사례
레고회사는 2000년대 초 파산직전에 몰렸을 때 스몰데이터를 활용해서 그 위기에서 벗어났던 사례가 있습니다.
정확히는 빅데이터를 이용해서 해결하려고 했으나, 빅데이터에서는 한결같이 미래 세대는 이전 세대와 비교했을 때 시간과 인내심이 부족하기 때문에 복잡한 블록에는 관심이 없다는 내용만 내놓았습니다.
그래서 레고 마케팅 부서에서도 블록 크기를 키우도 단순화하려고 생각했었던 때, 독일의 한 소년과 인터뷰를 한 뒤로 생각을 뒤집게 됩니다.
열정적인 레고 마니아이면서 열정적인 스케이트보더였던 소년은 자신에게 가장 자랑스러운 것이란 연습으로 닳고 닳은 운동화라고 마케터들에게 내밀었습니다.
레고 마케터들은 그 운동화를 통해 어린이들의 세계에서 중요한 것은 무언가를 발전시키고 성취해낸 증거가 되는 물건을 갖는 것이란 것을 깨닫고, 이전 생각을 뒤집어 블록을 더 작고 조립 설명서를 더 상세하게 만들었습니다.
그 결과, 레고는 극적으로 살아남아 지금 우리도 잘 알고 있는 레고 회사로서 남아있을 수 있게 되었습니다.
빅데이터를 통해서는 해결할 수 없었던 문제가 필요한 내용만을 전할 수 있었던 스몰데이터를 통해서 해결할 수 있었습니다. 데이터량이 적더라도, 보다 유익한 정보를 제공할 수 있는 데이터 모델이 스몰데이터인 것입니다.[3]
전망
시장조사기관 가트너(Gartner)도 2025년까지 조직의 70%가 빅데이터에서 스몰데이터로 초점을 전환하여 AI 분석을 수행할 것으로 전망함.
__(글로벌 ICT 주간동향리포트, 22년 2월 4주차)
그뿐만이 아닙니다. 스몰데이터는 자신의 불편함을 깨닫지 못하는 많은 사용자들에게 의견을 구하는 설문보다, 한 사람의 고객에 대해 조사하는 것으로 다른 관점과 해결책을 얻을 수 있게도 할 수 있습니다.[1]
가트너도 스몰데이터의 가능성과 가치를 매우 높게 보고 있으며[3], 앞으로의 인공지능에서 빅데이터만이 아니라 스몰데이터를 통해서 또다른 차원의 AI와 산업 발전을 기대해 볼 수 있겠습니다.
referece
[1]구자룡, 데이터는 양, 기술이 아닌 마인드다 : 빅데이터 시대, 스몰데이터를 주목하자!(2018, 12, 20) <통계의 창>.
[2]빅데이터? 이제 '스몰데이터' 시대가 온다!(2016, 09, 01) . URL : https://news.lgdisplay.com/kr/2016/09/small-data/
[3]이보영, "이젠 빅데이터 대신 '스몰 데이터'..."(2021, 11, 15) <애플경제>. URL:https://www.apple-economy.com/news/articleView.html?idxno=68308
- 스타트업을 위한 '스몰 데이터' 뽀개기 (https://platum.kr/archives/172339)
