flume案例-网络数据采集-Flume的配置
生活随笔
收集整理的這篇文章主要介紹了
flume案例-网络数据采集-Flume的配置
小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
開(kāi)發(fā)配置文件
根據(jù)數(shù)據(jù)采集的需求配置采集方案，描述在配置文件中(文件名可任意自定義)
配置我們的網(wǎng)絡(luò)收集的配置文件
在flume的conf目錄下新建一個(gè)配置文件（采集方案）
vim /export/servers/apache-flume-1.8.0-bin/conf/netcat-logger.conf # 定義這個(gè)agent中各組件的名字 a1.sources = r1 a1.sinks = k1 a1.channels = c1 # 描述和配置source組件：r1 a1.sources.r1.type = netcat a1.sources.r1.bind = 192.168.174. a1.sources.r1.port = 44444 # 描述和配置sink組件：k1 a1.sinks.k1.type = logger # 描述和配置channel組件，此處使用是內(nèi)存緩存的方式 a1.channels.c1.type = memory a1.channels.c1.capacity = 1000 a1.channels.c1.transactionCapacity = 100 # 描述和配置source channel sink之間的連接關(guān)系 a1.sources.r1.channels = c1 a1.sinks.k1.channel = c1?
總結(jié)
以上是生活随笔為你收集整理的flume案例-网络数据采集-Flume的配置的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇： flume案例-网络数据采集-Flume
- 下一篇： flume案例-网络数据采集-启动flu