Alluxio：2022年大数据五大趋势，多云下数据湖兴起，AI成为主流

Alluxio创始人兼CEO预测2022年大数据发展五大趋势：混合云和多云、人工智能和深度学习、服务、数据共享和新的数据湖存储格式成为关注重点。

编辑 | 宋慧

出品 | CSDN 云计算
 
近日，全球首创的开源云原生数据编排软件开发商Alluxio 创始人兼 CEO 李浩源博士针对云、人工智能、深度学习和数据分析在即将到来的2022年的发展趋势进行了预测。更多的组织机构将推进数据变革战略，将多样化的工作负载运行在广泛的云和混合云平台上。在2022年，人工智能、机器学习和数据分析的工作负载以及支撑它们的技术和服务将取得更大的进展。

混合云成为现实，多云战略优势显而易见

随着技术的不断成熟，工具的不断发展，云迁移过程不断简化，大型企业使用多数据中心和不同公有云厂商的混合云战略已经成为标配。到 2022 年，我们将看到企业进一步提升数字化程度，通过采用混合云和多云部署模式来利用云平台的弹性和敏捷性优势，同时保持对其数据的严格控制。此外，由于企业也不希望被供应商锁定，云厂商需要不断创新，并通过改进网络连接和物理架构来增强其竞争力。

主流AI和深度学习

随着人工智能（AI）应用和工具的不断发展，机器学习和深度学习平台已逐渐成为主流，并将达到和专业数据分析一样的市场成熟度。目前，我们已经看到大量基于 Apache Spark 和 Presto 的全托管集成服务，到 2022 年，我们将看到基于 PyTorch 和 Tensorflow等框架的垂直整合。用于工作流自动化和管理的机器学习操作（MLOps）将不可或缺，这会进一步降低AI和机器学习的难度并加速其应用。

一切皆服务

操作的复杂性导致了本地 Hadoop 的消亡，而云服务能够轻松实现架构配置的弹性，并且操作成本很低。2022 年，我们将看到托管服务的出现，它不仅会应用于单一云环境，也会应用于混合云和本地部署，可降低数据目录、数据治理、计算框架、可视化和交互式分析（Notebooks）等大量组件集成的复杂性。

跨云数据分享

2022年，随着云上 SaaS 和托管服务形成更多数据孤岛，更好的数据治理、增强的数据目录，结合跨服务的数据编织将很好地解决这一问题，实现跨租户、跨云服务厂商之间高效、安全地共享数据，数据交换比以往更容易实现。

数据湖存储格式的兴起

存储层和计算层中的技术栈都将不断创新。数据湖逐步兴起，结构化数据将向新格式转变。 2022 年，Apache Iceberg 或 Apache Hudi 等开源项目将取代云原生环境中较为传统的 Hive数仓，让Presto 和 Spark 工作负载能够更高效地实现大规模运行。