自2006年誕生以來，Hadoop技術與社區已走過了13個年頭，在經歷了大數據技術高速發展之后，迎來了3.x的時代。這些年來，Hadoop如何在騰訊、阿里、滴滴、小米、美團、頭條以及京東巧妙落地？在全新的時期，有哪些方向值得關注？Hadoop技術社區又將走向何方？2019年8月10日，Hadoop將首次在中國組織meetup，為你揭曉大數據Hadoop技術與社區發展的Roadmap。

活動時間和地點

時間：2019年8月20日

地點：北京希格瑪大廈北塔 B1 多功能廳

活動議程

9:40-10:00? ? 簽到&自由交流

10:00-10:20? Hadoop社區與技術RoadMap分享?

10:20-10:50? DevOps Ozone：Hadoop原生對象存儲探秘

10:55-11:25? YARN3.x in Alibaba

13:30-14:10? Hadoop Submarine：跨平臺的一站式機器學習平臺

14:15-18:30??Hadoop在滴滴，小米，美團，頭條以及京東的落地實踐

講師及議題

>>>>Hadoop社區與技術RoadMap

演講嘉賓：堵俊平-騰訊TEG數據平臺部海量存儲與計算研發負責人，騰訊開源聯盟主席，開源管理委員會委員。Apache Member, Hadoop PMC & Committer, Hadoop社區負責人之一。譚望達 - Cloudera計算平臺研發負責人，管理Kubernetes、Hadoop YARN相關的全球研發團隊。在開源領域，是Apache Hadoop 項目管理委員會委員，Hadoop社區負責人之一。

議題簡介：Hadoop的 3.x時代，有哪些方向值得關注？Hadoop技術社區又走向何方？本次分享將為你揭曉大數據Hadoop技術與社區發展的Roadmap。

>>>>Ozone：Hadoop原生對象存儲探秘

演講嘉賓：Anu Enginner:Cloudera PrincipleEngineer， Apache HadoopCommitter & PMC member， Apache Ratis Committer& PMC Member。陳怡(Sammi Chen)：騰訊大數據工程師， Apache Hadoop Committer & PMC member， 專注于大數據存儲領域。

議題簡介：Ozone是由Hadoop社區新發起的一個強一致性分布式對象存儲服務。Ozone 擁有和HDFS一樣的可靠性，一致性和可用性，支持S3 接口，不僅適用于on-premise 大數據環境，同時也是大數據上云，云端存儲的一個很好的選擇。本次分享介紹Ozone的構架，和將要發布的0.5版本的新特性。

>>>>YARN3.x in Alibaba

演講嘉賓：楊弢，2014年加入阿里，目前在計算平臺事業部任職技術專家，專注于YARN和Flink資源調度方向，今年7月成為Hadoop Committer。

議題簡介：阿里集團內部Hadoop生態的基本情況和YARN3.x上線新特性的應用場景與效果，分享阿里在調度、搶占、資源超賣、作業診斷、在離線混部等方面做出的一些改進和探索，介紹Flink基于YARN特性實現的功能及其應用場景。

>>>>Hadoop Submarine：跨平臺的一站式機器學習平臺

演講嘉賓：湯占坤，Cloudera軟件工程師，也是Apache Hadoop社區的committer。曾經參與領導了在YARN上支持GPU和FPGA，插件式的自定義資源框架以及GPU拓撲感知調度算法等。

議題簡介：機器學習系統是一個涵蓋了數據處理、特征工程、交互式算法開發和調試、模型訓練、在線服務、模型管理等的復雜軟件。Hadoop社區發起的Submarine 項目的目標是圍繞Notebook 的交互式方式完成上述主要過程，讓開發者無需關心復雜的底層基礎設施（Docker、YARN、K8s或者混合部署環境），像在本地一樣方便的使用。且在這個過程中提供極簡易用的用戶體驗。在該演講中，我們會介紹Submarine這個項目的現狀，并通過演示來加深你的了解。

>>>>YuniKorn-可適配YARN和Kubernetes的新一代輕量級資源調度器

演講嘉賓：楊巍威，Cloudera資深軟件工程師，Apache Hadoop的committer和PMC成員。一直專注于大規模分布式系統的存儲以及調度系統設計，在Hadoop的HDFS和YARN上都有大量的貢獻。近幾年主要工作在基于YARN的離線調度、在離線混部、超賣等相關特性的開發。在加入Cloudera之前，曾在阿里巴巴實時計算平臺任職，也曾是IBM大數據項目的早期成員之一。

議題簡介：YuniKorn是一個經過全新設計的輕量級的分布式系統資源調度器，能夠比較容易的集成到YARN或者Kubernetes里面，以承擔資源調度的職責。為了講調度器本身與資源管理平臺(如YARN和Kubernetes)解耦，YuniKorn抽象了一層通用的調度器協議接口；而調度核心算法封裝在yunikorn-core組件中，實現了經典的層級調度隊列，公平調度，彈性的容量管控以及細粒度的強占等特性；yunikorn-core通過寄宿在資源管理平臺上的shim層來獲得請求的更新，派發調度的決策，而所有的溝通都是使用scheduler-interface。這樣，yunikorn-core中沒有任何與特定平臺相關的語言，可以輕松的與各類平臺集成。

YuniKorn的誕生是為了解決通用的調度問題，其中既包含離線批處理任務，也包含在線長運行的任務。通過將各類型任務調度到同一平臺，以解決資源利用率不足以及管理低效等問題。除此以外，YuniKorn還提供了用于顯示集群資源信息，作業信息以及隊列信息的統一視圖web UI。

除此之外，還有來自京東、滴滴、小米、美團、頭條以及華為的專家到場為大家分享Hadoop落地實踐經驗。更多精彩，等你來解鎖~

活動報名現已啟動，點擊閱讀原文跳轉報名鏈接。名額有限，速度報名~如果你無法來到現場，也可以掃描下方二維碼預約現場直播哦~

超強干貨來襲 云風專訪：近40年碼齡，通宵達旦的技術人生

總結

以上是生活随笔為你收集整理的首届Hadoop技术社区中国meetup来袭！对外报名正式启动！的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。