原文:关于logstash-out-mongodb插件说明

从kafka获取数据,存到mongodb中。适合空间查询geo point设置。配置文件如下: input kafka type gt test auto offset reset gt smallest group id gt m topic id gt db zk connect gt . . . : , . . . : , . . . : filter mutate split gt mes ...

2018-01-04 15:51 0 1350 推荐指数:

查看详情

通过logstash-input-mongodb插件mongodb数据导入ElasticSearch

目的很简单,就是将mongodb数据导入es建立相应索引。数据是从特定的网站扒下来,然后进行二次处理,也就是数据去重、清洗,接着再保存到mongodb里,那么如何将数据搞到ElasticSearch中呢?调研之后觉得logstash-input-mongodb插件是个不错的选择,当然了也有 ...

Sat Jan 20 00:51:00 CST 2018 4 6507
Logstash之四:配置说明

logstash配置文件包含三个配置部分: 分别为:input{}、filter{}、output{}。{} 定义区域,区域内可以定义一个或多个插件,通过插件对数据进行收集,加工处理,输出。 在{}配置中可以使用表达式完成要采集数据的逻辑,表达式中的数据类型和运算符如下: 1、数据类型 ...

Fri Mar 10 03:51:00 CST 2017 0 1355
logstashmongodb-log

1、logstash6.5.3 配置收集mongodb的日志: 首先在mongodb服务器上部署filebeat收集日志并上传到logstash进行处理,然后上传到ES。 filebeat-conf: 这里只给出主要的配置。 logstash ...

Tue May 14 22:20:00 CST 2019 0 557
Logstash zabbix 插件

zabbix 监控 logstash 安装社区扩展包wget http://download.elasticsearch.org/logstash/logstash/logstash-contrib-1.4.2.tar.gz解压后覆盖 /usr/local/logstash ...

Sat Sep 06 00:22:00 CST 2014 1 2510
logstash的mutate插件

数据修改(Mutate) filters/mutate 插件Logstash 另一个重要插件。它提供了丰富的基础类型数据处理能力。包括类型转换,字符串处理和字段处理等。 类型转换 类型转换是 filters/mutate 插件最初诞生时的唯一功能。其应用场景在之前 Codec/JSON ...

Fri Jun 05 02:32:00 CST 2020 0 1108
logstash 插件安装

logstash官方提供的插件安装方法是: bin/plugin install logstash-output-webhdfs 按照此方法,不出意料肯定会出现以下错误 ...

Thu Aug 20 00:37:00 CST 2020 0 607
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM