Alluxio:2022年大数据五大趋势,多云下数据湖兴起,AI成为主流
Alluxio創始人兼CEO預測2022年大數據發展五大趨勢:混合云和多云、人工智能和深度學習、服務、數據共享和新的數據湖存儲格式成為關注重點。
編輯 | 宋慧
出品 | CSDN 云計算
?
近日,全球首創的開源云原生數據編排軟件開發商Alluxio 創始人兼 CEO 李浩源博士針對云、人工智能、深度學習和數據分析在即將到來的2022年的發展趨勢進行了預測。更多的組織機構將推進數據變革戰略,將多樣化的工作負載運行在廣泛的云和混合云平臺上。在2022年,人工智能、機器學習和數據分析的工作負載以及支撐它們的技術和服務將取得更大的進展。
混合云成為現實,多云戰略優勢顯而易見
隨著技術的不斷成熟,工具的不斷發展,云遷移過程不斷簡化,大型企業使用多數據中心和不同公有云廠商的混合云戰略已經成為標配。到 2022 年,我們將看到企業進一步提升數字化程度,通過采用混合云和多云部署模式來利用云平臺的彈性和敏捷性優勢,同時保持對其數據的嚴格控制。此外,由于企業也不希望被供應商鎖定,云廠商需要不斷創新,并通過改進網絡連接和物理架構來增強其競爭力。
主流AI和深度學習
隨著人工智能(AI)應用和工具的不斷發展,機器學習和深度學習平臺已逐漸成為主流,并將達到和專業數據分析一樣的市場成熟度。目前,我們已經看到大量基于 Apache Spark 和 Presto 的全托管集成服務,到 2022 年,我們將看到基于 PyTorch 和 Tensorflow等框架的垂直整合。用于工作流自動化和管理的機器學習操作(MLOps)將不可或缺,這會進一步降低AI和機器學習的難度并加速其應用。
一切皆服務
操作的復雜性導致了本地 Hadoop 的消亡,而云服務能夠輕松實現架構配置的彈性,并且操作成本很低。2022 年,我們將看到托管服務的出現,它不僅會應用于單一云環境,也會應用于混合云和本地部署,可降低數據目錄、數據治理、計算框架、可視化和交互式分析(Notebooks)等大量組件集成的復雜性。
跨云數據分享
2022年,隨著云上 SaaS 和托管服務形成更多數據孤島,更好的數據治理、增強的數據目錄,結合跨服務的數據編織將很好地解決這一問題,實現跨租戶、跨云服務廠商之間高效、安全地共享數據,數據交換比以往更容易實現。
數據湖存儲格式的興起
存儲層和計算層中的技術棧都將不斷創新。數據湖逐步興起,結構化數據將向新格式轉變。 2022 年,Apache Iceberg 或 Apache Hudi 等開源項目將取代云原生環境中較為傳統的 Hive數倉,讓Presto 和 Spark 工作負載能夠更高效地實現大規模運行。
總結
以上是生活随笔為你收集整理的Alluxio:2022年大数据五大趋势,多云下数据湖兴起,AI成为主流的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: re:Invent大会第十年,亚马逊云科
- 下一篇: AI 趋势