数据一直是企业最宝贵的资产之一,而现在其增长速度正在变得势不可挡。2024年,全球创建、采集、复制和消耗的数据量预计将达到147ZB,同比增长 23%。IDC发布的Global DataSphere 2023显示,中国数据量规模预计将从2022的23.88ZB增长至2027年的76.6ZB,年均增长速度高达26.3%,居全球之首。
随着数据量的增长,其潜在应用也随之增多。近年来,数据已经从单一的采集并应用于简单任务,转变为能够在药物研发、个性化医疗以及智能环保城市开发等领域真正改变生活的宝贵资产。
然而,数据规模的扩大也加剧了存储和分析方面的挑战。尽管管理和提取庞大数据资源库的新方法不断涌现,但只有那些能够有效管理海量数据的企业,才能充分发挥数据优势,并创造出有价值的用例。
有效数据管理的重要性
不同于其他贵重商品,数据的价值不在于其稀缺性,而在于其如何被使用。当今的IT环境高度复杂,既有本地系统,也有私有或公有云。因此数据的有效管理变得日益重要,且愈发具有挑战性。这种混合多云模式意味着数据通常分散在不同的地理位置,并被不同的技术基础设施和策略所孤立。
企业需要一种高成本效益的方法,在适当的时间向适当的人提供正确的数据,以支持员工做出明智的决策。同时,企业必须以统一而无缝的方式实现这一点,让员工能够在严格的数据安全和治理法规框架内,轻松自助访问数据。为此,企业必须寻找与其业务需求相匹配的合适数据架构。
数据编织架构可用于大规模的数据准备和管理。开放式数据湖仓通过云技术将数据湖库的存储功能与数据仓库的结构和可访问性相结合,提供近乎无限的存储空间、可扩展的虚拟算力、成本效益和高弹性等额外优势。
深入改变各行各业
如果企业能够建立起一个可充分发挥数据力量的架构,即可开启探索新用例的大门。从智慧城市到金融业,几乎每个行业都在寻找充分利用数据的方法:
•加速智慧城市的智能化:借助现代混合云数据架构,政府和其他利益相关方能够获取、存储和分析大量非结构化数据。通过利用云技术的节能优势,并提高获取数据驱动型洞察的能力,企业可以在减少碳排放的同时,分析犯罪、交通拥堵等事件的实时数据。
•迅速实施救治:无论是加速数据处理以更快地寻找器官捐献者,还是利用预测分析提供个性化治疗,云和数据的力量正在挽救生命。在制药领域,制药公司正在组合运用数据和AI优化药物研发,从而加快新治疗方法的面世,以挽救更多生命。
•制造业的变革: 混合云和现代数据架构已被用于支持物联网,加强工业4.0工厂的生产和供应链能力。凭借对库存的深入了解和更灵活的流程,制造商能够迅速适应,最大限度地减少供应链中断,以满足不断变化的市场需求,更快地将用户需要的产品送到他们手中。
•保持与客户的连接:通过打破传统孤岛和支持AI分析,现代混合架构为电信公司提供全方位的客户、网络运营和服务视图。这些洞察能够支持电信公司更快检测出故障,提高网络性能,并且借助更加准确的客户分析优化端到端体验。
•个性化个人金融服务:通过分析客户互动中产生的实时上下文数据,银行可以跨所有渠道策划相关的用户体验。生成式AI可逐步提升复杂操作的能力,比如增强客户聊天机器人的能力等。同时,预测分析可以实时分析交易,以防止可疑活动和欺诈行为。
迈向更广阔的未来
现代数据架构所带来的潜在优势远不止上述所列。一旦企业能够充分利用其创建和采集的海量数据,便开启了无限的可能性。
企业领导人需要根据数据做出更明智的客户和运营决策。但随着数据量的增长和IT复杂性的提高,这项工作变得更具挑战性。而这正是混合云和多云数据平台的“用武之地”,它们能够消除数据孤岛,在正确的时间为正确的人提供快速、经济且高效数据访问方式。
【本文作者刘隶放,肯睿中国Cloudera大中华区技术总监】