logstash-grok 相关问题

Grok是一个基于正则表达式的抽象,可以轻松地将非结构化文本解析为结构化和可查询的形式。

Elasticsearch - Logstash Grok 新字段日期格式是字符串而不是日期

我有一个场景,Logstash 使用 grok 将消息拆分为不同的字段。其中一个字段是 message_date 字段,该字段被提取并发送到 elasticsearch。 现在输入

回答 1 投票 0

Kibana/Logstash 不使用 grok 模式提取数据

出于某种我不知道的原因,elasticsearch 不会使用 grok 模式从日志文件中提取数据: 输入 { 文件 { 路径=>“/mnt/tutorialdata/www1/access.log” 开始位置...

回答 1 投票 0

Logstash 配置从 S3 存储桶获取 ALB 日志

我正在尝试配置 Logstash 以从 S3 存储桶获取 ALB 日志。在我的应用程序负载均衡器中,我添加了多个目标组。现在我的要求是创建单独的...

回答 1 投票 0

GROK 模式未返回结果

我对 ELK 很陌生,我一直卡在提取字段上。下面是示例数据 12 月 9 日 06:36:01 s-login-01 CRON[2436102]: pam_unix(cron:session): 用户 mXXt 会话关闭 12 月 9 日 06:34:07 s-log...

回答 2 投票 0

如何使用grok模式在kibana中解析此内容?

kibana 中的消息是: {"log":"2024-02-01 10:30:00.004 INFO 1 --- [pool-1-thread-2] c.ankon.timer.ReminderExecCheckSchedule : 检测定时,开始... ","流":&

回答 1 投票 0

我的logstash过滤器grok语法有什么问题?

我正在尝试在 Logstash 日志上使用 OpenSearch。 我有两个日志,但第二个日志不适用于 OpenSearch 可用字段。 这是我的两个日志,每个日志都有不同的 log4j 模式。这是一个

回答 1 投票 0

在 kube-prometheus-stack 中添加额外的 scrapeconfig 时出现问题

我已经通过 Helm Chart 安装了 kube-prometheus-stack。 需要为普罗米修斯添加额外的抓取配置。 创建了一个 configmap 以从 grok-exporter 中抓取指标 api版本:v1 种类:

回答 3 投票 0

如何匹配grok中出现0次或1次的数据?

如果有人能帮助我解决 Logstash frok 问题,我将不胜感激。 我正在尝试为下面的示例创建一个单一的 grok 定义。我的目标是将主题解析为一个字段。 t1='t1', t2='t2', 子...

回答 1 投票 0

Logstash 添加日期类型的字段

我的日志包含以下格式的时间:20231030 09:41:20.179021。我想将它们解析为logstash中的Date类型。 这是我当前的过滤器 筛选{ 领悟{ 匹配 => {...

回答 2 投票 0

datadog日志处理:如何取消嵌套的json

我正在向 datadog 发送 json 格式的日志消息: “标题”:{ “内容类型”: [ “应用程序/json” ] }, “方法”:“POST”, ...

回答 1 投票 0

Grok 语法,如果它是新条目或前一个条目的延续,则不同

我使用 Grok 作为默认插件来过滤我的日志,所以让我说我有一个简单的 3 个日志条目: 2023-08-17 10:10:50.751 +02:00 [警告] [提供商] 采集失败 2023-08-17 10:10:50.751 ...

回答 1 投票 0

Logstash 8.8.2 中的 Grok 模式和主机名提取问题

列出项目 我在处理来自客户端计算机的日志时遇到 Logstash 8 问题,而 Logstash 6 可以正确处理相同的日志。以下是日志样本: 日志示例 - Logstash...

回答 0 投票 0

带有空格和不可预测日志的 Grok 过滤器

我正在尝试设置一些 grok 过滤器以将我的防火墙日志拉入 Elastic。 我遇到的问题是日志是不可预测的,有些字段有空格,我无法弄清楚如何...

回答 0 投票 0

如何删除 在 Logstash 中

出于安全原因,我需要解析 /etc/passwd 文件以查找过期或虚假帐户。使用以下过滤器解析一个示例文件后: 筛选 { 神交{ 匹配 => {"

回答 2 投票 0

logstash 的 Nginx grok 模式

以下是我的Nginx日志格式 log_format timed_combined '$http_x_forwarded_for - $remote_user [$time_local] ' '"$request" $status $body_bytes_sent ' '"$http_referer" "$http_user...

回答 2 投票 0

Logstash conf 错误:无法解析文档中 [date] 类型的日期字段:无法解析日期:使用格式 [strict_date_optional_time||epoch_millis]

我正在做一个 ELK stack 作业 我在为多个组件 grok 模式配置时收到日期格式的 logstash 配置错误。我的日期是 21-Feb-2023 07:30:55.000(在

回答 0 投票 0

将matcher集成到logstash grok配置中出错。

我使用的是logstash 7.6.2。我的日志行是json字符串。每个json有3个字段,"msg "是文本,"topic "是文本,"ts "是一个浮点数。下面是我的匹配表达式。{"...

回答 1 投票 0

Logstash日志解析

我得到了这个日志信息。Jul 23 09: 24: 16 mmr mmr-core[5147]: Aweg3AOMTs_1563866656876839.mt GetProvider_v4,我把它运到elasticsearch。我想在logstash过滤器中解析它,并使id ...

回答 1 投票 0

如何改变logstash创建ES索引时区?

logstash.conf: elasticsearch{ hosts => ["172.31.29.xxx:9200"] index => "redis-%{+YYYYMMdd}" } 我用YYYYMMdd定义了索引,我想改变索引的时区,如何才能 ...

回答 1 投票 0

Logstash - 按关键字过滤系统日志。

我是ELK的新手,我有一个logstash存储从多个网络设备产生的系统日志。所有类型的事件被标记在一个设施(不幸的是),我只感兴趣的存储日志......

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.