日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問(wèn) 生活随笔!

生活随笔

當(dāng)前位置: 首頁(yè) > 编程资源 > 编程问答 >内容正文

编程问答

使用ganglia监控hadoop

發(fā)布時(shí)間:2025/3/17 编程问答 25 豆豆
生活随笔 收集整理的這篇文章主要介紹了 使用ganglia监控hadoop 小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

使用Ganglia監(jiān)控Hadoop
Hadoop本身提供了很多監(jiān)控工具的接口,如JMX、Nagios、Ganglia等。使用Ganglia監(jiān)控hadoop,配置起來(lái)非常簡(jiǎn)單,只需要修改$HADOOP_HOME/conf/hadoop-metrics.properties文件,把相關(guān)的配置段修改為下面的示例:

# Configuration of the "dfs" context for ganglia
# Pick one: Ganglia 3.0 (former) or Ganglia 3.1 (latter)
# dfs.class=org.apache.hadoop.metrics.ganglia.GangliaContext
dfs.class=org.apache.hadoop.metrics.ganglia.GangliaContext31
dfs.period=10
dfs.servers=239.2.11.71:8649 /*該地址為必須為廣播地址,否則采集不到數(shù)據(jù)!!

# Configuration of the "mapred" context for ganglia
# Pick one: Ganglia 3.0 (former) or Ganglia 3.1 (latter)
# mapred.class=org.apache.hadoop.metrics.ganglia.GangliaContext
mapred.class=org.apache.hadoop.metrics.ganglia.GangliaContext31
mapred.period=10
mapred.servers=239.2.11.71:8649

# Configuration of the "jvm" context for ganglia
jvm.class=org.apache.hadoop.metrics.ganglia.GangliaContext
jvm.period=10
jvm.servers=239.2.11.71:8649

配置文件的其它部分保持默認(rèn)。
把配置文件分發(fā)到各個(gè)datanode節(jié)點(diǎn)上,然后重啟hadoop集群,就可以在Ganglia的監(jiān)控頁(yè)面中看到Hadoop各個(gè)節(jié)點(diǎn)的運(yùn)行情況。HBase的監(jiān)控同樣照此處理。
注意:我的Ganglia版本為3.17,Hadoop版本為cloudera版,版本為hadoop-0.20.2-CDH3B4;不同的Ganglia和Hadoop版本,要修改的東西會(huì)有不同,請(qǐng)自行核對(duì)。

轉(zhuǎn)載于:https://www.cnblogs.com/cloudma/archive/2012/11/22/ganglia-hadoop.html

總結(jié)

以上是生活随笔為你收集整理的使用ganglia监控hadoop的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。