flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统,在实际开发环境中被广泛使用,本篇文章重点为大家讲解一下Linux下部署flume具体步骤。
操作系统:CentOS6.9 64位
解压:
tar -xzvf apache-flume-1.7.0-bin.tar.gz
创建软链接:
ln -s /opt/modules/apache-flume-1.6.0-cdh5.9.3-bin/ /opt/shortcut/flume
这里不再添加环境变量
修改flume-env.sh配置文件:
# 先修改名字
mv flume-env.sh.template flume-env.sh
vim flume-env.sh
# 添加JAVA_HOME
export JAVA_HOME=/usr/java/default
创建一个配置文件,这里使用官网给的一个例子
vim test.conf
# 内容如下:
# example.conf: A single-node Flume configuration
# Name the components on this agent
# 定义一个 agent 的元素
a1.sources = r1
a1.sinks = k1
a1.channels = c1
# Describe/configure the source
# 配置 source
a1.sources.r1.type = netcat
a1.sources.r1.bind = localhost
a1.sources.r1.port = 44444
# Describe the sink
# 配置 sink
a1.sinks.k1.type = logger
# Use a channel which buffers events in memory
# 定义 channel
a1.channels.c1.type = memory
a1.channels.c1.capacity = 1000
a1.channels.c1.transactionCapacity = 100
# Bind the source and sink to the channel
# 用 channel 连接起来 source 和 sink
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1
安装telnet:
yum install telnet
yum install telnet-server
yum install xinetd
重启telnet:
service xinetd restart
启动flume:
bin/flume-ng agent --conf conf --conf-file conf/test.conf --name a1 -Dflume.root.logger=INFO,console
启动telnet:
telnet localhost 44444
在telnet里输入内容:
在Flume进而查看是否接收到:
会看到这样的内容,可能有时候这一行显示的内容比我们输入的内容要少,并不是没有接收到,而是因为超过了它能显示的长度,给省略掉了
网站标题:Linux下安装日志收集系统flume
标题网址:http://www.csdahua.cn/qtweb/news30/391680.html
网站建设、网络推广公司-快上网,是专注品牌与效果的网站制作,网络营销seo公司;服务项目有等
声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 快上网