Seagate가 최근에 발표한 Rethink Data 보고서에 따르면 “데이터는 가치 있는 보물입니다.” 전 세계에서 수집된 디지털 데이터(데이터스피어)에는 인류의 노력에 가치있는 데이터 집합이 계속해서 팽창하고 있습니다. 보고서에 언급된 것처럼, 여기에는 "긴급하고 생사를 좌우하는 정보, 지식 이력, 운영 지침, 제조 과정, 감정 연대기" 등이 포함되어 있습니다.
여기서 문제는 그 가치를 어떻게 실현하느냐 하는 것입니다.
데이터 양이 폭발적으로 증가하면서 IT 전문가와 기업은 데이터의 가치를 높이는 데 어려움을 겪고 있습니다. 간단히 말해, 데이터에서 가치를 창출하려면 먼저 해당 데이터를 사용해야 합니다. 하지만 이를 위해서는 단순히 데이터를 캡처하고 저장하는 것 이상의 것이 필요합니다. 데이터를 분류, 구성 및 분석하여 궁극적으로 데이터의 비즈니스 가치를 발견하는 방법을 결정할 수 있어야 합니다.
누락된 비즈니스 데이터의 가치
데이터가 누락되었다는 것은 기업이 보유하고 있는 정보를 활용하려고 하지 않는다는 것이 아니라, 기업에서 사용 가능한 귀중한 데이터를 모두 캡쳐하지 못하고 있다는 것입니다. 또한 수집된 정보도 종종 분류나 목록화, 분석이 부적절하게 되어 활용할 수 없는 경우가 많습니다.
NYU 공과대학 GovLab 교수 겸 책임자인 Stefaan G. Verhulst는 최근 HBR 기사에서 “우리는 지식 경제에 살고 있으며 조직은 여전히 활용도가 낮은 자산을 활용하는 방법을 찾으려고 애쓰고 있다"고 설명하며, "기업이 생성하는 방대한 양의 정보는 엄청난 잠재적 가치를 지닌 저장소라는 사실은 모두 동의한다. 그러나 조직과 사회는 이 가치 실현 방법을 알고 있는가?"라고 반문했습니다.
Seagate의 Rethink Data 보고서에 따르면 오늘날 데이터 활용률은 매우 저조합니다. 기업은 운영을 통해 사용 가능한 데이터의 56%만 수집하고, 이 중에서 57%만 사용합니다.
그 결과, 평균적으로 기업에서 사용 가능한 데이터의 68%가 업무에 활용되지 않습니다.
또한 전체 조직의 1/4만이 수집하는 정보의 가치를 정량화하는 프로세스를 갖추고 있습니다. 데이터의 잠재적 가치를 알지 못하면 가치를 실현하는 것은 거의 불가능합니다. 의료에서 운송에 이르는 대부분 업계의 경영진들은 정보 활용 능력에 있어서 자사가 앞서나간다고 생각하지 않습니다.
그러나 추정과 직관에 따르면 사용하지 않은 데이터의 가치는 천문학적입니다. 병원을 예를 들어보면, 정보를 생성하는 수많은 소스와 활동이 있습니다. 환자 기록, 청구 정보, MRI, 엑스레이, 원격 의료 상담 등은 막대한 가치를 제공할 수 있는 데이터 유형의 몇 가지 예에 불과합니다. IDC(International Data Corporation)가 Rethink Data 보고서에서 분석한 결과에 따르면, 보통의 병원이 보유하고 있는 데이터 중 가치를 발견하지 못했거나 분석되지 않아 묻혀 있는 데이터의 가치가 수억 달러에 이른다고 합니다.
기업들에게 주어진 과제는 이미 수집한 정보의 고유한 가치를 실현할 수 있도록 퍼즐의 조각을 맞추는 것입니다.
데이터를 이해하고 활용하는 방법
가치를 실현하는 첫 번째 단계는 단순히 더 많은 가치를 캡처하는 것입니다. 조직은 올바른 정보를 수집하여 필요한 곳에 저장하고 사용자 친화적인 방식으로 의사 결정권자에게 제공해야 합니다. 하지만 소스, 장치 및 사물 인터넷(IoT)이 기하급수적으로 증가함에 따라 엔터프라이즈 IT 인프라는 수집과 스토리지 측면에서 어려움을 겪고 있습니다.
데이터 관리 소프트웨어는 이러한 문제를 해결하는 데 도움이 될 수 있습니다. 데이터 수집 솔루션은 데이터 수명 주기 초반에 정보를 분류하고, 유용한 기간에 해당 정보를 자동으로 보관하며, 필요할 때 데이터 아카이브로 이동시킬 수 있습니다. 이러한 유형의 데이터 프루닝(pruning) 소프트웨어는 기업이 시스템과 스토리지에 부담을 주지 않고도 더 많은 데이터를 획득할 수 있도록 지원합니다.
일단 확보된 정보는 대규모 데이터 레이크로 흘러 들어가 소프트웨어 애플리케이션에서 정보에 쉽게 접근할 수 있습니다. 그런 다음 데이터 과학자와 큐레이터는 이러한 소프트웨어 도구를 사용하여 의사 결정권자를 위해 조사와 분석을 수행하고 그래프와 추세를 시각화할 수 있습니다. 소위 데이터 레이크를 생성하면 사일로가 제거되고 관련이 없어 보이는 요소와의 연결이 용이해집니다.
기업이 새로운 연결과 통찰력을 갖출 수 있도록 지원하면 중요한 경쟁 우위로 이어집니다.
엣지 데이터 캡처 및 스토리지 기술의 향상
엣지 데이터 캡처 및 처리의 개선과 데이터 스토리지의 지속적인 혁신이라는 두 가지 추세는 기업에 막대한 가치를 실현할 수 있는 더 많은 기회를 제공합니다.
보고서에 따르면 "엣지 장치는 데이터 캡처에 도전과제를 제시한다. 종종 엣지 애플리케이션만이 어떤 데이터를 캡처하고 조치해야 하는지, 또한 어떤 데이터가 일시적이어서 무시할 수 있는지 파악한다."고 설명합니다.
엣지 캡처를 위해서는 데이터가 생성되는 위치와 최대한 근접하게 분석과 의사 결정이 이루어져야 합니다.
엣지에서 인공지능(AI)을 사용하는 최신 데이터 관리 애플리케이션이 등장하면서 엣지에서의 신속한 분석을 실현하고 있습니다. 기업은 IT 시스템에 과부하를 주지 않는 데이터 캡처를 위한 개선된 메커니즘을 구축함에 따라 성장을 주도하는 인사이트를 획득할 수 있게 되었습니다.
스토리지 혁신의 여러 다양한 영역 또한 기업이 창출할 수 있는 가치에 영향을 미치고 있습니다. 첫째, 대용량의 스토리지 하드웨어가 증가하여 AI 애플리케이션이 더 많은 양의 정보에 액세스할 수 있습니다. 스토리지 하드웨어가 더욱 강력해지고 더 많은 데이터를 저장할 수 있게 되면서 보다 정교한 AI 솔루션이 지원될 수 있습니다. 클라우드 및 데이터 센터 인프라의 상당 부분을 정의하는 하드 드라이브, SSD 및 스토리지 시스템 전반에서 스토리지 용량이 개선되고 있습니다.
또한 스토리지 대역폭이 개선되어 스토리지, 네트워킹 및 컴퓨팅 기능 간에 보다 강력한 정보 이동이 가능해졌습니다. 대역폭은 분석 애플리케이션이 정보를 수집하는 중추입니다. 예를 들어, 조직은 대역폭을 개선하기 위해 복잡한 AI 애플리케이션을 위한 세분화된 컴포저블 아키텍처를 채택합니다.
또한 보안 강화를 통해 이러한 대규모 데이터 레이크의 분석을 침해와 손상으로부터 보호합니다. Rethink Data 보고서에 따르면, 장치와 시스템 수준에서 보안을 강화하는 기술 부문에 대한 투자가 증가하고 있습니다. 기업은, 예를 들어, 대규모 AI 애플리케이션이 정보를 안전하게 분석할 수 있다는 확신을 가져야 합니다.
그러나 혁신이 효과적인 내부 관리와 계획을 대신할 수는 없습니다. 정보를 수집하는 것은 쉬운 일입니다. 까다로운 부분은 인텔리전스입니다. 스마트한 수집과 구성을 위해서는 중복된 도구, 데이터 복잡성, 통합으로 인한 문제를 극복해야 합니다. 비즈니스 목표를 정보 수집 활동의 중심에 두지 못하면 축적된 데이터에서 예상했던 만큼의 가치를 이끌어내지 못합니다.
보고서의 설문조사에 따르면 2020년 초에서 2022년 초까지 약 2년 동안 기업에서 생성되는 데이터가 연간 42.2% 증가할 것으로 예측됩니다. 하지만 오늘날 분석에 사용할 수 있는 모든 데이터의 2/3 이상이 누락되거나 잊혀지거나 사라집니다.
비즈니스의 첫 번째 단계는 실제로 얼마나 많은 정보가 누락되거나 활용률이 떨어지는지 파악하는 것입니다. 가치 실현의 핵심은 수집, 스토리지, 분석의 기술 발전입니다. 기업은 핵심 비즈니스 목표 관점에서 이러한 도구와 데이터 레이크를 확인하여 가치 있는 데이터 보물을 발견할 수 있습니다.
Seagate의 Rethink Data 보고서에서 기업이 더욱 많은 데이터를 업무에 활용할 수 있는 방법에 대해 알아보십시오.
