日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

Hadoop Yarn常用参数配置项整理

發(fā)布時間:2025/1/21 编程问答 72 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Hadoop Yarn常用参数配置项整理 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

(1)Resourcemanager 相關(guān)

yarn.resourcemanager.scheduler.client.thread-count ResourceManager 處理調(diào)度器請求的線程數(shù)量 yarn.resourcemanager.scheduler.class 配置調(diào)度器

(2)Nodemanager 相關(guān)

yarn.nodemanager.resource.memory-mb NodeManager 使用內(nèi)存數(shù) yarn.nodemanager.resource.system-reserved-memory-mb NodeManager 為系統(tǒng)保留多少內(nèi)存,和上一個參數(shù)二者取一即可 yarn.nodemanager.resource.cpu-vcores NodeManager 使用 CPU 核數(shù) yarn.nodemanager.resource.count-logical-processors-as-cores 是否將虛擬核數(shù)當作 CPU 核數(shù) yarn.nodemanager.resource.pcores-vcores-multiplier 虛擬核數(shù)和物理核數(shù)乘數(shù),例如:4 核 8 線程,該參數(shù)就應(yīng)設(shè)為 2 yarn.nodemanager.resource.detect-hardware-capabilities 是否讓 yarn 自己檢測硬件進行配置 yarn.nodemanager.pmem-check-enabled 是否開啟物理內(nèi)存檢查限制 container yarn.nodemanager.vmem-check-enabled 是否開啟虛擬內(nèi)存檢查限制 container yarn.nodemanager.vmem-pmem-ratio 虛擬內(nèi)存物理內(nèi)存比例

(3)Container 容器相關(guān)

yarn.scheduler.minimum-allocation-mb 容器最小內(nèi)存 yarn.scheduler.maximum-allocation-mb 容器最大內(nèi)存 yarn.scheduler.minimum-allocation-vcores 容器最小核數(shù) yarn.scheduler.maximum-allocation-vcores 容器最大核數(shù) 與50位技術(shù)專家面對面20年技術(shù)見證,附贈技術(shù)全景圖

總結(jié)

以上是生活随笔為你收集整理的Hadoop Yarn常用参数配置项整理的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。