logstash-configuration 相关问题

Logstash - 解析嵌套的 KV 日志

我对这种日志有疑问： <183>Apr 26 12:53:53 host.example tag_audit_log: type=USER_ACCT msg=audit(1989212.965:15124458): pid=20982 uid=0 auid=427890281 ses=4294967295 subj=sys...

如何使用logstash forwarder指定elasticsearch索引

我想达到的目标： 从 logback-spring.xml 或 application.properties 配置日志将在其中结束的 elasticsearch 索引。 我尝试了什么： 我目前正在使用这种依赖： <

logstash 的 Nginx grok 模式

以下是我的Nginx日志格式 log_format timed_combined '$http_x_forwarded_for - $remote_user [$time_local] ' '"$request" $status $body_bytes_sent ' '"$http_referer" "$http_user...

当 mongodb 数据更新时，Logstash 不会更新数据

为了同步elasticsearch和mongodb，我配置了logstash。 这是我的配置正常工作： 输入 { mongodb { uri => ''

Logstash - 输入中的 if 语句

if 语句是否适用于 logstash 输入？ 有什么方法可以在输入之前检查字段是否存在？我喜欢做这样的事情： 输入 { 如果 [field] 和 [another_field] { 节拍...

Logstash 在使用聚合时推送正确的数据

我正在通过 logstash 将数据推送到 elastic，在 logstash 中我将数据作为父子进行了 aggerated。 这个推送数据但是在聚合时遗漏了一些数据，例如我有一张卡并且有 10

Filebeat 无法连接到 logstash

我在云上使用两台服务器，在一台服务器上 (A) 我安装了 filebeat，在第二台服务器上 (B) 我安装了 logstash、elasticsearch 和 kibana。所以我在从

将matcher集成到logstash grok配置中出错。

我使用的是logstash 7.6.2。我的日志行是json字符串。每个json有3个字段，"msg "是文本，"topic "是文本，"ts "是一个浮点数。下面是我的匹配表达式。{"...

Logstash自动更新数据

我使用的是最新版本的logstash(7.6.2)。我试着上传了一个样本数据，并且能够使用logstash成功上传到elasticsearch中(启用了自动重载)，并且能够看到 ...

Filebeat中的YARN或HDFS日志。

如果我想把HDFS中的日志摄取到Filebeat中，我该怎么做？我可以指定本地驱动器上的任何目录，但我希望Filebeat从HDFS中提取数据。有没有...

如何改变logstash创建ES索引时区？

logstash.conf: elasticsearch{ hosts => ["172.31.29.xxx:9200"] index => "redis-%{+YYYYMMdd}" } 我用YYYYMMdd定义了索引，我想改变索引的时区，如何才能 ...

Logstash。多行XML日志的自定义定界符

我有一些XML日志，其中日志以"======"结尾，例如 DEBUG 这是调试级别 =======

使用 Logstash Aggregate Filter 插件来处理可能或可能没有排序的数据。

大家好！我正在尝试使用Logstash v7.7的Aggregate filter插件来关联和合并来自两个不同的数据。我正在尝试使用Logstash v7.7的Aggregate filter插件来关联和组合来自两个不同CSV文件输入的数据，这些数据代表了API数据调用。我的想法是产生一个 ...

使用Logstash将json字符串注入到不同的Elasticsearch索引中。

我有这些样本数据存储在postgresql的事件表中: {"playhead":0, "metadata":"{"class/":\"Broadway/Domain/Metadata/",\"payload/":{"console/":{"command/":{"Doctrine/Bundle/"..."。

解析多行日志时出现logstash配置问题

我有下面的多行日志，我正尝试用我的logstash配置进行解析。 2020-05-27 11:59:17 ---------------------------------------- ------------------------------ 2020-05-27 11:59:17得到了...

日志文件的Grok模式

总的来说，我对Logstash和ELK还是陌生的。我需要以以下格式为日志文件编写grok模式：[191114 | 16：51：13.577 | BPDM | MDS | 2 | 209 | ERROR | 39999]被信号中断！！！我...

如何在没有通过tl传递-k的情况下卷曲elasticsearch kubernetes运算符？

您好，ElasticSearch冠军，我从https://www.elastic.co/guide/en/cloud-on-k8s/current/k8s-quickstart.html在Kubernetes上部署了EK。没有-k选项，我无法卷曲ElasticSearch！ curl --...

如何通过tls从logstash连接elasticsearch kubernetes运算符？

您好，ElasticSearch冠军，我从https://www.elastic.co/guide/en/cloud-on-k8s/current/k8s-quickstart.html在Kubernetes上部署了EK。没有-k选项，我无法卷曲ElasticSearch！ curl --...

Elasticsearch未创建从Logstash输出文件接收的索引

[我有一个带有Elasticsearch，Logstash和Kibana（均为rel.7.7.0的版本）的Ubuntu 20.04 VM，我想做的是（除其他事项外）让Logstash从Cisco接收Syslog和Netflow陷阱。 。

删除带有Elasticsearch和Logstash的输入标签字段

我正在使用logstash发送给elasticsearch，有人会知道如何删除[tags]字段吗？我正在使用此字段来筛选每个jdbc输入应输入的位置，下面留下一个示例。我...