将日志从kafka传输到elasticsearch

瓦比哈夫·戈尔

我正在寻找重量轻的原木托运人,它可以将我的原木直接从kafka传输到elasticsearch。在Filebeat,Logagent,Logstash中脱颖而出(但我需要轻量级),其中哪些或其他套件可以最适合我的用例?

停止

rsyslog是轻量级的。从8.27版开始,它支持kafka作为输入。从更早开始就支持Elasticsearch作为输出。

在此处输入图片说明

Kafka输入模块的配置在这里描述

Elasticsearch输出模块配置在此处描述

本文收集自互联网,转载请注明来源。

如有侵权,请联系 [email protected] 删除。

编辑于
0

我来说两句

0 条评论
登录 后参与评论

相关文章

将AWS CloudWatch日志组流式传输到多个AWS Elasticsearch Services

如何将logstash中的日志/txt文件管道传输到elasticsearch

PostgreSQL逻辑日志流式传输到Apache Kafka

AWS 将多行日志文件从 CloudWatch 流式传输到 ELK

将日志分析心跳指标流式传输到事件中心

用管道将最新的日志文件传输到awk

如何将日志从 elk 堆栈流式传输到 python

将 Couchbase 数据实时传输到 Kafka

使用Logstash将数据流式传输到Amazon Elasticsearch?

如何通过Kafka Connector将数据从Kafka流式传输到MongoDB

如何将AWS EC2 cloud-init日志流式传输到ELK?

将数据从MySQL二进制日志传输到Kinesis

将 Azure 容器日志记录流式传输到 Web 应用程序

Serilog-Sinks-Loki将日志大量传输到Loki。如何减少批次数量?

将命令输出管道传输到Yad,并将输出记录到日志文件中

将变量传输到模板

将JFrame传输到JPanel

如何流式传输到全球Kafka表

Kafka使用logstash流式传输到cassandra

尝试将数据流式传输到Kafka时出现“注册Avro模式时出错”

如何配置Kafka Connect Worker将更多消息流式传输到HDFS

将消息从一个Kafka集群流式传输到另一个

数据从SQL Server传输到ElasticSearch节点

有没有办法将数据从 ldap 服务器传输到 MySQL(或 Elasticsearch)?

无法通过Logstash将数据从MS Sql Server传输到ElasticSearch

如何配置logstash将数据从MS-SQL服务器传输到elasticsearch

将多个cloudwatch日志组流式传输到一个lambda时,如何增加策略限制?

vim:如何将打印到消息日志的内容的输出通过管道传输到缓冲区?

vim:如何将打印到消息日志的内容的输出通过管道传输到缓冲区?