Alluxio创始人兼CEO预测2022年大数据发展五大趋势

混合云和多云、人工智能和深度学习、服务、数据共享和新的数据湖存储格式成为关注重点。

日,全球首创的开源云原生数据编排软件开发商Alluxio创始人兼 CEO 李浩源博士针对云、人工智能、深度学习和数据分析在即将到来的2022年的发展趋势进行了预测。更多的组织机构将推进数据变革战略,将多样化的工作负载运行在广泛的云和混合云平台上。在2022年,人工智能、机器学习和数据分析工作负载以及支撑它们的技术和服务将取得更大的进展。

混合云成为现实,多云战略优势显而易见

随着技术的不断成熟,工具的不断发展云迁移过程不断简化,大型企业使用数据中心和不同公有云厂商的混合云战略已经成为标配。到 2022 年,我们将看到企业进一步提升数字化程度,通过采用混合云和多云部署模式来利用云平台的弹性和敏捷性优势,同时保持对其数据的严格控制。此外,由于企业也不希望被供应商锁定,云厂商需要不断创新,并通过改进网络连接和物理架构来增强其竞争力。

主流AI和深度学习

随着人工智能(AI)应用和工具的不断发展,机器学习和深度学习平台已逐渐成为主流,并将达到和专业数据分析一样的市场成熟度。目前,我们已经看到大量基于 Apache Spark Presto 的全托管集成服务,到 2022 年,我们将看到基于 PyTorch Tensorflow等框架的垂直整合。用于工作流自动化和管理的机器学习操作(MLOps)将不可或缺,这会进一步降低AI和机器学习的难度并加速其应用。

一切皆服务

操作的复杂性导致了本地 Hadoop 的消亡,而云服务能够轻松实现架构配置的弹性,并且操作成本很低。2022 年,我们将看到托管服务的出现,它不仅会应用于单一云环境,也会应用于混合云和本地部署,可降低数据目录、数据治理、计算框架、可视化和交互式分析(Notebooks)等大量组件集成的复杂性。

跨云数据分享

2022年,随着云上 SaaS 和托管服务形成更多数据孤岛,更好的数据治理、增强的数据目录,结合跨服务的数据编织将很好地解决这一问题,实现跨租户、跨云服务厂商之间高效、安全地共享数据数据交换比以往更容易实现

数据湖存储格式的兴起

存储和计算层中的技术栈都将不断创新。数据湖逐步兴起,结构化数据将向新格式转变。 2022 年,Apache Iceberg Apache Hudi 等开源项目将取代云原生环境中较为传统的 Hive数仓,让Presto Spark 工作负载能够更高效地实现大规模运行。

关于Alluxio

Alluxio系统是全球首个分布式超大规模数据编排系统,孵化于加州大学伯克利分校AMP实验室。自项目开源以来,已有超过来自100多个组织机构的1100多位贡献者参与开发。Alluxio能够在跨集群、跨区域、跨国家的任何云中将数据更紧密地编排接近数据分析和人工智能/机器学习应用程序,从而向上层应用提供内存级别速度的数据访问。目前,Alluxio的智能数据分层和数据管理功能为金融服务、高科技、零售和电信等诸多领域客户提供了长期业务支持,并已在全球Web规模的现代化数据服务的生产环境中得到验证,全球十大互联网公司中有八家在生产环境中部署了Alluxio

来源:业界供稿

0赞

好文章,需要你的鼓励

2021

12/22

13:17

分享

点赞

邮件订阅
白皮书