数据基础:向分布式数据架构的转型
描述:在本系列中,我们将重点介绍对四大数字基础设施的关键洞察:计算、网络、数据和安全。本博客重点介绍分布式数据架构以及强大的数据基础如何为企业的未来持续发展奠定基础。
作者:Dan Eline,Digital Realty 平台解决方案副总裁
企业目前正在经历从数字经济向数据经济的转变,企业必须利用数据的力量来保持竞争力。随着人工智能 (AI)、大数据和机器学习 (ML) 等新一代商业用例的出现,他们的数字基础设施也在向数据驱动的架构转型。
数据增长带来的障碍及其对底层基础设施的影响
数据引力—随着AI、大数据和 ML 的应用,数据量和复杂性快速增加,所带来的影响也愈加显著。随着数据集呈指数级增长,企业面临着严峻挑战,例如孤立数据阻碍了实时数据处理和分析。这使得获取可操作的洞察分析并做出数据驱动的决策变得困难。
企业需要确保其数据基础设施具有高性能、可扩展性、连接性和安全性等特点,以保持对市场需求的敏捷性和响应能力。从传统数据基础设施向分布式混合数据架构的转型,使公司能够在新数据经济中蓬勃发展。
Digital Realty 平台解决方案副总裁 Dan Eline 探讨为何数据基础 — 即数据整合、本地化和管理 — 是实现 IT 优先级的关键所在。
分布式数据战略的必要性
届时,按需数据主导着商业 IT 格局。然而,拥有孤岛数据、非结构化数据和不良数据治理模式的企业数量,远远超过那些拥有紧密且管理良好的分布式数据架构的企业。
- 超过 70% 的北美公司调查显示,他们在基础设施和分析工具上的投资明显不足。
- 被困数据:81% 的企业存在数据孤岛。
- 数据管理问题:72% 的企业指出,数据管理仍然是扩展 AI 用例的主要障碍。
- 非结构化数据激增:到 2026 年,非结构化数据将达到 221,000 艾字节,预计到 2025 年将占全球数据的 80%。1
推动分布式数据架构需求的四大市场趋势
- 实时数据和大型数据集处理的需求:按需商业智能涉及企业运营的各个方面,从动态定制营销方案到快速识别并消除网络安全威胁。
- 物联网和人工智能支出的增长:据麦肯锡公司称,AI 用例每年可带来高达 4.4 万亿美元的经济效益。一个用例涉及 AI 与物联网的结合,以实现对终端、传感器和智能设备的自动化管理。IDC 的物联网分析师 Carlos M. Gonzalez 指出,物联网投资不再是一种奢侈品,而是数据驱动型企业的必需品。
- 云和数字化转型:2022 年至 2027 年期间,全球数字化转型支出将以 16.2% 的复合年增长率持续增长,预计到 2027 年将达到 4 万亿美元 (IDC)。云计算也在继续增长,Gartner 预测将增长 20.4%。据该研究公司报告,到 2025 年,公有云支出将达到 8247 亿美元。
- 全球扩张:随着业务地点的扩展,数据主权要求也随之而来。这就要求企业建立数据存储、处理和管理的据点。快速发展的公司与拥有全球布局的托管数据中心提供商合作,以迅速扩展全球布局,确保遵守适用法律,并推动实现业务目标。IDC 最近的 Cloud Pulse 调查显示,近一半的受访者 (48%) 认为数据主权和合规性是未来 IT 基础设施的关键。
企业采用分布式数据战略时的考虑要素
尽管数据引力给业务运营带来持续压力,但企业面临的最大挑战并不是数据量的多少。高效的数据访问能够释放数据的潜力,而数据孤岛则为这种高效访问设置了障碍。部署分布式数据架构使企业能够围绕战略重点提取、整合、清理和转换数据。
- 数据合规:全球业务增长和不断扩大的数据量给企业的数据治理带来了挑战,例如数据主权法规。部署分布式数据架构的企业在确保合规的同时,还能够高效访问本地化数据。
- 数据分析:分布式数据架构为企业提供全球所有据点数据的实时访问,加速了数据驱动型分析计划实施。
- 数据流:部署用于数据流的分布式基础设施,为分析工具提供低延迟的数据访问。示例包括来自 IoT 传感器的数据、安全日志、银行交易、Web 流量报告和应用程序性能数据等。
- 延迟:分布式数据基础设施部署允许企业随时随地访问最佳环境,以实现低延迟和高速数据传输,同时避免不可预测的管理和数据传输成本阻碍决策和发展。
- 可操作的商业智能:这种分布式数据架构最终形成一个强大的数据引擎,企业可以通过该引擎拉动战略杠杆,按需获取关键数据,并通过可操作的洞察分析创造竞争优势。
- 传统系统:在探索传统硬件和应用程序对分布式数据方面的限制性时,我们发现了一个令人担忧的循环。如今的硬件和应用程序满足当前的商业需求,但却让公司难以突破现有能力,无法更进一步。
要实现未来增长,企业的核心战略就是数字化转型。在对传统 IT 基础设施的财务影响进行分析时,我们发现投资现代数据基础设施具有长期战略优势。那些仅依赖当前技术解决方案的企业,将会失去未来的竞争优势。有些人认为消除技术债务纯粹是财务问题,而另一些人则认为它是一个情境化、具有战略意义的问题。从数字化转型中获益最多的 IT 领导者,通过先进的 IT 基础设施来区别化他们的核心业务。
领先的公司选择与 Digital Realty 等全球托管数据中心公司合作,以管理数字化转型的成本。托管服务是当前基础设施和分布式数据基础设施之间的桥梁,实现了高效的混合 IT。这种方法为减少延迟、整合流量以及更有效地管理数据回程成本开辟了新途径。
来自 Digital Realty 客户的真实案例
Digital Realty 助力 IT 领导者将部署上市时间缩短 50%,确保遵循数据主权法规,并将安全交易的延迟降低到微秒级。以下是与 Digital Realty 合作的企业寻求并获益的四个最新实例。
快速上市部署:CoreWeave
云服务提供商 CoreWeave 为客户提供 AI 就绪型基础设施,提供无缝且经济实惠的体验。为了充分利用 GenAI 的增长优势,该公司面临着快速扩展以满足对更高处理能力日益增长的需求的挑战,需要部署高性能计算解决方案。CoreWeave 需要在美国西海岸的活跃生态系统中大幅缩短上市时间,因此与 Digital Realty 合作,为其强大的 AI 优化 GPU 集群寻找合适的环境。Digital Realty 将 CoreWeave 预计的 AI 部署时间缩短了 50%,并确保其 LLM 训练集群的空间能够集中在一个建筑内,从而大大缩短了其上市时间。
提升延迟和性能:SumUp
快速满足严格监管标准的金融交易。金融科技公司 SumUp 要求通过其移动信用卡支付系统进行的交易必须快速、安全并符合监管要求。通过 Digital Realty 在 PlatformDIGITAL® 上提供的托管服务,SumUp 利用了 Digital Realty 在德国法兰克福园区的多个云服务提供商构建的混合 IT 环境。这使 SumUp 能够访问欧洲各个地区展开业务,而无需在多个欧洲国家部署据点,从而避免了复杂性和额外成本。因此,SumUp 满足了供应商及其客户的需求,将交易时间缩短至仅几秒钟。
合规的全球基础设施:FUGA
音乐发行和营销公司 FUGA 希望在不违反数据主权法规的情况下实现全球扩张。他们与 Digital Realty 合作,将客户数据放置在适当的国家和地区,以遵守数据保护法并持续实现预期增长。
应对转型挑战
清晰的信息:没有强大数据基础的企业会面临增长风险。持续推进企业 IT 数据基础建设的一个最令人信服的理由就是技术债务。许多公司陷入了一种舍本逐末的循环中。为分布式数据基础设施奠定基础,对业务管理来说既紧迫又重要。
Digital Realty 的 PlatformDIGITAL® 是一个开放且安全的平台,可简化网络基础设施的复杂性。Digital Realty 为客户提供安全的数据“聚集地”,以及经验证的 Pervasive Datacenter Architecture (PDx™) 解决方案方法论,以推动创新并有效管理数据引力挑战。
在 Digital Realty 的最新电子书《您准备好使用数据和 AI 了吗?》中了解更多信息
1 IDC,全球数据圈、全球存储圈及非结构化数据预测,2023-2027