ELK系列(三)、安装Logstash插件及打包离线安装包

野性酷女 2023-02-11 10:15 99阅读 0赞

Logstash有input、output、filter、codec 四种插件类型，支持的种类也很丰富，功能特别强大。选对正确的插件可以节省很多的资源占用和开发效率。 生产环境一般都无法连接到公网，所以本篇就带大家如何在线安装，以及打包离线安装包，然后使用离线安装包进行离线安装。

[ELK系列(一)、安装ElasticSearch+Logstash+Kibana+Filebeat-v7.7.0][ELK_ElasticSearch_Logstash_Kibana_Filebeat-v7.7.0]

[ELK系列(二)、在Kibana中使用RESTful操作ES库][ELK_Kibana_RESTful_ES]

\--------------------------------------Logstash插件安装及离线打包------------------------------------------------------------

# Logstash数据处理流程： #

input-->decode-->filter-->encode-->output

输入-->解码-->过滤-->编码-->输出

# 在线安装logstash插件 #

### 查看 ###

插件介绍: [https://www.elastic.co/guide/en/logstash/7.7/index.html][https_www.elastic.co_guide_en_logstash_7.7_index.html]

插件列表: [https://github.com/logstash-plugins][https_github.com_logstash-plugins]

查看当前已安装的插件：

cat $LS_HOME/Gemfile

### 配置 ###

**安装ruby**

yum install ruby

**下载rubygem2.6.12** :  [https://rubygems.org/rubygems/rubygems-2.6.12.zip][https_rubygems.org_rubygems_rubygems-2.6.12.zip]

**解压并安装rubygems**

unzip rubygems-2.6.12.zip
    
    ruby rubygems-2.6.12/setup.rb

**查看版本**

gem -v

** 修改gem源为国内源**

国内的gem源：[https://gems.ruby-china.com/][https_gems.ruby-china.com]

#修改源
    gem sources --add https://gems.ruby-china.com/ --remove https://rubygems.org/
    #查看
    gem sources -l

![20200522231105877.png][]

**配置 gemrc 文件**

vim ~/.gemrc 
    #增加下面内容，忽略 SSL 证书错误
    :ssl_verify_mode: 0

![2020052223123498.png][]

**安装**

在线安装github的插件，插件名称在上面的github里找即可或者在下面的中国的gem源网页内搜关键字查找

bin/logstash-plugin install logstash-output-mongodb

使用命令*cat Gemfile |grep xxx* 或使用*bin/logstash-plugin list* 命令即可查看插件是否安装成功，若在Gemfile内即表示插件已安装成功 ：

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dzZGMwNTIx_size_16_color_FFFFFF_t_70][]

# 打包logstash插件的离线安装包 #

在上一步在线安装好了插件之后，我们也可以将该插件打包成zip包，在生产环境使用离线安装，使用下面的命令打包离线安装包，这里使用上面在线安装好的 logstash-output-mongodb

bin/logstash-plugin prepare-offline-pack --overwrite --output logstash-output-mongodb.zip logstash-output-mongodb

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dzZGMwNTIx_size_16_color_FFFFFF_t_70 1][]

可以看到打包之后的插件的zip包里以logstash命名的文件夹，下面有一个dependencies目录和插件的gem文件，打开dependencies里面还是几个gem文件。

因此我们其实也可以直接打开国内的gem源：[https://gems.ruby-china.com/][https_gems.ruby-china.com]

搜索logstash-output-mongodb并下载gem文件，然后按照上面的格式打成zip包，效果与上面的prepare-offline-pack打包的离线安装包一样。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dzZGMwNTIx_size_16_color_FFFFFF_t_70 2][]

# 使用离线安装包安装Logstash插件 #

上面一步我们已经成功的打包了logstash插件的离线安装包，使用下面的命令即可离线安装Logstash插件:

bin/logstash-plugin install file:///opt/app/logstash-7.7.0/logstash-output-mongodb.zip

如果对你有帮助，点个赞鼓励一下作者吧~ 谢谢！

[ELK_ElasticSearch_Logstash_Kibana_Filebeat-v7.7.0]: https://blog.csdn.net/wsdc0521/article/details/106236499
[ELK_Kibana_RESTful_ES]: https://blog.csdn.net/wsdc0521/article/details/106241596
[https_www.elastic.co_guide_en_logstash_7.7_index.html]: https://www.elastic.co/guide/en/logstash/6.6/index.html
[https_github.com_logstash-plugins]: https://github.com/logstash-plugins
[https_rubygems.org_rubygems_rubygems-2.6.12.zip]: https://rubygems.org/rubygems/rubygems-2.6.12.zip
[https_gems.ruby-china.com]: https://gems.ruby-china.com/
[20200522231105877.png]: https://img-blog.csdnimg.cn/20200522231105877.png
[2020052223123498.png]: https://img-blog.csdnimg.cn/2020052223123498.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dzZGMwNTIx_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20200522231655468.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dzZGMwNTIx,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dzZGMwNTIx_size_16_color_FFFFFF_t_70 1]: https://img-blog.csdnimg.cn/20200522232145416.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dzZGMwNTIx,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dzZGMwNTIx_size_16_color_FFFFFF_t_70 2]: https://img-blog.csdnimg.cn/20200522232632149.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dzZGMwNTIx,size_16,color_FFFFFF,t_70