Logstash怎么配置文件

68次阅读
没有评论

共计 5017 个字符,预计需要花费 13 分钟才能阅读完成。

本篇内容主要讲解“Logstash 怎么配置文件”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让丸趣 TV 小编来带大家学习“Logstash 怎么配置文件”吧!

一、下载

二、安装,启动

[root@hftest0001 opt]# pwd
[root@hftest0001 opt]# ll
-rw------- 1 root root 89916973 Jan 14 03:03 logstash-1.5.6.tar.gz
[root@hftest0001 opt]# tar -zxvf logstash-1.5.6.tar.gz
[root@hftest0001 logstash-1.5.6]# pwd
/opt/logstash-1.5.6
修改 JAVA_HOME
[root@hftest0001 logstash-1.5.6]# vi bin/logstash
export JAVA_HOME=/usr/java/jdk1.7.0_67-cloudera
添加 conf
[root@hftest0001 logstash-1.5.6]# mkdir conf
[root@hftest0001 logstash-1.5.6]# vi conf/input_file-output_file.conf
input {
 file{ path =  [  /opt/logstash-data/input/1.log  ]
 }
output{ 
 file { path =  [ /opt/logstash-data/output/1.log]
 }
[root@hftest0001 logstash-1.5.6]# mkdir -p /opt/logstash-data/{input,output}
[root@hftest0001 logstash-1.5.6]# touch /opt/logstash-data/input/1.log
[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/
[root@hftest0001 logstash-1.5.6]# echo  1    /opt/logstash-data/input/1.log

三、多配置文件

配置文件分段。即把 input,filter,output 分成不同的文件。

A. 一个 input 一个 output

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*
[root@hftest0001 logstash-1.5.6]# vi conf/input_file.conf
input {
 file { path =  [  /opt/logstash-data/input/1.log  ]
 }
[root@hftest0001 logstash-1.5.6]# vi conf/output_file.conf
output{ 
 file { path =  [ /opt/logstash-data/output/1.log]
 }
[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/

[root@hftest0001 logstash-1.5.6]# echo  1    /opt/logstash-data/input/1.log [root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log 1

B 两个 input(两个 input 是完全一样的) 一个 output

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*
[root@hftest0001 logstash-1.5.6]# vi conf/input_file.conf
input {
 file { path =  [  /opt/logstash-data/input/1.log  ]
 }
[root@hftest0001 logstash-1.5.6]# vi conf/input_file2.conf
input {
 file { path =  [  /opt/logstash-data/input/1.log  ]
 }
[root@hftest0001 logstash-1.5.6]# vi conf/output_file.conf
output{ 
 file { path =  [ /opt/logstash-data/output/1.log]
 }
[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/
[root@hftest0001 logstash-1.5.6]# echo  1    /opt/logstash-data/input/1.log
注意注意!!!!结果
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
继续添加数据
[root@hftest0001 logstash-1.5.6]# echo  2    /opt/logstash-data/input/1.log
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
2 = 变成了三条数据,即我们可以看出,两个 input 分别产生了一条数据。为什么没有两个 2 呢?此时 kill logstash  后,[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
2

C 两个 input(两个 input 是不一样的) 一个 output

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*
[root@hftest0001 logstash-1.5.6]# vi conf/input_file.conf
input {
 file { path =  [  /opt/logstash-data/input/1.log  ]
 }
[root@hftest0001 logstash-1.5.6]# vi conf/input_file2.conf
input {
 file { path =  [  /opt/logstash-data/input/2.log  ]
 }
[root@hftest0001 logstash-1.5.6]# vi conf/output_file.conf
output{ 
 file { path =  [ /opt/logstash-data/output/1.log]
 }
[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/
[root@hftest0001 logstash-1.5.6]# echo  1    /opt/logstash-data/input/1.log
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
继续添加数据
[root@hftest0001 logstash-1.5.6]# echo  2    /opt/logstash-data/input/2.log
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
2

D 一个 input 两个 output(两个 output 完全一样)

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*
[root@hftest0001 logstash-1.5.6]# vi conf/input_file.conf
input {
 file { path =  [  /opt/logstash-data/input/1.log  ]
 }
[root@hftest0001 logstash-1.5.6]# vi conf/output_file.conf
output{ 
 file { path =  [ /opt/logstash-data/output/1.log]
 }
[root@hftest0001 logstash-1.5.6]# vi conf/output_file2.conf
output{ 
 file { path =  [ /opt/logstash-data/output/1.log]
 }
[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/
[root@hftest0001 logstash-1.5.6]# echo  1    /opt/logstash-data/input/1.log
注意注意!!!结果   即同一条消息被两个 output 都写入相同文件
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
继续添加数据
[root@hftest0001 logstash-1.5.6]# echo  2    /opt/logstash-data/input/2.log
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
2

E 一个 input 两个 output(两个 output 不一样)

[root@hftest0001 logstash-1.5.6]# rm -rf ./conf/*
[root@hftest0001 logstash-1.5.6]# vi conf/input_file.conf
input {
 file { path =  [  /opt/logstash-data/input/1.log  ]
 }
[root@hftest0001 logstash-1.5.6]# vi conf/output_file.conf
output{ 
 file { path =  [ /opt/logstash-data/output/1.log]
 }
[root@hftest0001 logstash-1.5.6]# vi conf/output_file2.conf
output{ 
 file { path =  [ /opt/logstash-data/output/2.log]
 }
[root@hftest0001 logstash-1.5.6]# ./bin/logstash -f conf/
[root@hftest0001 logstash-1.5.6]# echo  1    /opt/logstash-data/input/1.log
注意注意!!!结果   即同一条消息分别被两个 output 写入不同文件
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/2.log
继续添加数据
[root@hftest0001 logstash-1.5.6]# echo  2    /opt/logstash-data/input/2.log
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/1.log
[root@hftest0001 logstash-1.5.6]# cat /opt/logstash-data/output/2.log
2

F 一个 Input,要被写入不同的

到此,相信大家对“Logstash 怎么配置文件”有了更深的了解,不妨来实际操作一番吧!这里是丸趣 TV 网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

正文完
 
丸趣
版权声明:本站原创文章,由 丸趣 2023-08-16发表,共计5017字。
转载说明:除特殊说明外本站除技术相关以外文章皆由网络搜集发布,转载请注明出处。
评论(没有评论)