Flume 采集日志数据
2.1配置source各个组件参source。#2.2channels组件参数设置。#2.3Sink组件参数设置。采集端口44444日志数据。测试:启动telnet进程。
采集端口44444日志数据
#1.名称
a1.sources=s1
a1.channels=c1
a1.sinks=k1
#2.1配置source各个组件参source
a1.sources.s1.type=netcat
a1.sources.s1.bind=master
a1.sources.s1.port=44444
#2.2channels组件参数设置
a1.channels.c1.type=memory
a1.channels.c1.capacity=1000
#2.3Sink组件参数设置
a1.sinks.k1.type=logger
#3.设置连接方式
a1.sources.s1.channels=c1
a1.sinks.k1.channel=c1
启动Agent
flume-ng agent -c /usr/local/apache-flume-1.9.0-bin/conf/ -f
/usr/local/apache-flume-1.9.0-bin/conf/netcat_memory_logger.conf -n a1
-Dflume.root.logger=INFO,console
测试:启动telnet进程
telnet localhost 44444

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。
更多推荐
所有评论(0)