logstash 相关问题

Logstash是用于管理事件和日志的工具。您可以使用它来收集日志,解析它们并将它们发送到存储器以供以后使用(例如搜索)。

使用 Filebeat 将文件中单行中的多个 json 对象作为单独的文档发送到 ELK

我是 ELK Stack 的新手。我有一个要求,其中包含如下所述的 json 数据的文件在一行中或可能在下一行中。 文件内容: {“事件”:{“名称”:&...

回答 0 投票 0

Logstash - 输入中的 if 语句

if 语句是否适用于 logstash 输入? 有什么方法可以在输入之前检查字段是否存在?我喜欢做这样的事情: 输入 { 如果 [field] 和 [another_field] { 节拍...

回答 0 投票 0

Logstash docker 无法登录 elasticsearch docker

我在 docker-compose 中设置了 2 个 docker,如下所示 弹性搜索: 图片:docker.elastic.co/elasticsearch/elasticsearch:8.6.0 卷: - ./config/elasticsearch/esdata:/usr/share/elasticsearch...

回答 0 投票 0

elasticsearch es_rejected_execution_exception

我正在尝试索引一个包含 50,000 条日志的 12mb 日志文件。 索引大约 30,000 条日志后,出现以下错误 [2018-04-17T05:52:48,254][信息][logstash.outputs.elasticsearch] retr...

回答 4 投票 0

带有额外查找和嵌套插入的传入文件节拍数据

我正在使用一种工具,该工具使用 filebeats 将文档插入到 elastic 中。但是,我想根据现有索引中的数据来丰富这些数据。 例如传入的数据将是一个事件描述......

回答 0 投票 0

Logstash Auditd `msg` 字段解析和转换

Auditd 日志使用 logstash 过滤器插件进行解析。但我还需要解析和转换 msg 字段内容 (msg=audit(1678949471.038:9696):)。我想设置 id 字段并转换 timesta ...

回答 0 投票 0

Logstash 在使用聚合时推送正确的数据

我正在通过 logstash 将数据推送到 elastic,在 logstash 中我将数据作为父子进行了 aggerated。 这个推送数据但是在聚合时遗漏了一些数据,例如我有一张卡并且有 10

回答 0 投票 0

Logstash:用 http 输出插件替换 Coralogix/Ruby 输出插件需要 x2 资源

根据 Coralogix 的说法,他们将放弃对 他们基于 Coralogix/Ruby 的插件。 作为替代,建议使用 http 输出插件。 您可以通过

回答 1 投票 0

Filebeat 无法连接到 logstash

我在云上使用两台服务器,在一台服务器上 (A) 我安装了 filebeat,在第二台服务器上 (B) 我安装了 logstash、elasticsearch 和 kibana。所以我在从

回答 1 投票 0

如何从 elk 中的字段中删除数据

我很新,但在弹性堆栈中不是那么新,我的公司需要从字段中删除数据 例子 我在 logstash 上解析到 elasticsearch 后发送了一个字段 让我们称之为

回答 2 投票 0

LogStash - sql_last_value 和 last_run_metadata_path 问题

我是 ELK 的新手,目前正在为一些设置而苦苦挣扎——也许我错过了一点。 我已经设置了我的 Logstash 来解析我的数据库 (MySql),并且我有 2 个案例: “意外维护” -&g...

回答 1 投票 0

Logstash beats 输入“无效版本的 beats 协议”

我正在编写一个 kibana 插件和一个 logstash 管道。对于我的测试,我只是写了一个这样的 logstash 输入: 输入 { 节拍{ 端口 => 9600 SSL => 假 ssl_verify_mo...

回答 3 投票 0

普罗米修斯的应用程序日志

我们有一个在 Kubernetes (AWS EKS) 中运行的应用程序,并且能够登录到堡垒主机并能够获取 PODS 的日志。 目前,我们的应用程序有问题,我们会...

回答 3 投票 0

Logstash conf 错误:无法解析文档中 [date] 类型的日期字段:无法解析日期:使用格式 [strict_date_optional_time||epoch_millis]

我正在做一个 ELK stack 作业 我在为多个组件 grok 模式配置时收到日期格式的 logstash 配置错误。我的日期是 21-Feb-2023 07:30:55.000(在

回答 0 投票 0

如何在Kubernetes集群上集成opensearch和logstash?

我有一个 kubernetes 集群,我在上面使用 Helm 部署了一个 opensearch 集群和 opensearch 仪表板,我也能够使用 helm 成功部署 logstash,但我对如何部署感到困惑

回答 1 投票 0

将 50 GB Elasticsearch 索引作为 JSON/文本导出到 S3

我需要将大量 Elasticsearch 索引以 JSON 格式导出到 S3,其中每个索引的大小约为 50GB。我一直在研究多种方法来做到这一点,但我需要最多的时间

回答 1 投票 0

Logstash docker,如何停止发送日志到stdout?

如何停止向stdout发送(使用env变量)日志?我把log_level改成了WARN,是的,我不再有INFO日志了,但我仍然收到这样的日志。14:14:51 "namespace" => "...

回答 1 投票 0

在Logstash S3输出插件中的自定义域。

我遇到了一堵墙,试图找出如何从Logstash S3输出插件建立的URL中摆脱".amazonaws.com"。它在我所处的环境中不工作。我已经尝试过...

回答 1 投票 0

将matcher集成到logstash grok配置中出错。

我使用的是logstash 7.6.2。我的日志行是json字符串。每个json有3个字段,"msg "是文本,"topic "是文本,"ts "是一个浮点数。下面是我的匹配表达式。{"...

回答 1 投票 0

elasticsearch的logstash中的日期翻译。

我们在CSV AccountingTimeStamp 2020-04-26+10:43:21.8中有以下日期,我如何用logstash将其翻译成elasticsearch日期?谢谢。

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.