logstash 相关问题

Logstash是用于管理事件和日志的工具。您可以使用它来收集日志,解析它们并将它们发送到存储器以供以后使用(例如搜索)。

Logstash 主类 JvmOptionsParser 未找到/无法加载

我已经被这个问题困扰很长一段时间了,任何帮助将不胜感激。 所以我有一个包含 Elastic Stack 服务的 docker compose,以及一个 Cassandra 数据库。 我正在努力

回答 1 投票 0

在实体内索引数组的最佳实践

我目前正在通过 SQL 中的 Logstash 将数据提取到 Elasticsearch。 我当前正在使用的实体有一个标签列表,它基本上是一个 id 列表。在 Logstash 管道中我有

回答 1 投票 0

如何使用 DSL 查询丢弃 ElasticSearch 中的重复值?

这里我试图根据查询客户获取属性名称,这里的问题是属性名称中有很多重复值我想丢弃,有人可以帮助我吗

回答 2 投票 0

logstash 无法连接到elasticsearch

我的elasticsearch、kibana 和logstash 在同一台机器上运行。当我厌倦了安装logstash来连接到elasticsearch时,我的CMD中显示以下错误。 [2...

回答 1 投票 0

Logstash 期望其中之一

有人可以帮我吗,如何解决这个问题,下面的代码在logstash configmap中使用? 输入 { 格尔夫{ 主机=>“0.0.0.0” 端口 => 12201 rb => | ...

回答 1 投票 0

logstash 改变 json 对象

如何使用logstash mutate过滤器进行转换 {“a”:{“b”:“str1”,“c”:“str2”,...}} 到 {“b”:“str1”,“c”:“str2&

回答 1 投票 0

我们如何使用gsub删除logstash消息中特定字符之后的模式

示例消息: 13-12-2022 `ACTIVITY-LOG` 20108 `这是我的示例 HMAC 消息`HMAC HMAC HMAC 我想将其替换为: 13-12-2022 `ACTIVITY-LOG` 20108 `这是我的示例 HMAC 消息` 我有...

回答 1 投票 0

Logstash 本地插件安装

我需要为 clickhouse 安装插件,但我的服务器上没有互联网连接,Logstash 正在尝试从存储库中查找插件 我将插件上传到服务器并尝试安装它....

回答 1 投票 0

Logstash jdbc 输入插件从没有唯一 id 或没有时间戳的数据库多次获取数据

我创建了一个名为 mypipeline 的管道,并将其与其他管道一起在 pipeline.yml (多管道)中执行。 这里的问题是我没有任何唯一的 id 或标识符列...

回答 1 投票 0

过滤掉非目录inode的hdfs审计日志

我正在使用logstash 将 HDFS 审核日志消息填充到 Kafka 主题中。 我在 Kafka 主题中收到的示例消息具有以下格式: allowed=true ugi={myuser} (auth:SIMPLE) ip={/x.x.x...

回答 1 投票 0

Logstash 无法连接到 kubernetes 上的 Elasticsearch

我在将 Logstash 连接到 Elasticsearch 时遇到问题。 我已经使用 helm 在 kubernetes 上安装了 ELK 堆栈。每个 Pod 都在运行并处于就绪状态。 Elasticsearch 和 kibana 完全没问题...

回答 2 投票 0

错误:exec /usr/local/bin/docker-entrypoint:Podman 上的 Logstash 容器的权限被拒绝

我正在尝试在 Podman 上运行 Logstash 的 podman 容器。 我的命令是这样的: podman 运行 \ --分离\ --名称 lgs01 \ --net els-net \ --发布 5000:5000 \ --发布 5044:5044 \ --发布8991...

回答 1 投票 0

在 fluidd 中使用日志时间更新时间戳/time_key 并不顺利

我有一个 Fluentd 客户端,它将日志转发到 Logstash,并最终通过 Kibana 查看。我尝试了几种配置来将时间戳更新为日志文件中的时间条目。然而,没有我...

回答 1 投票 0

ElasticSearch 7 未从 Logstash 上的 JDBC 获取 _id

我正在尝试使用存储到 SQL 数据库中的数据来更新 ElasticSearch 索引,以便添加到数据库中的每一行都会自动添加到 ElasticSearch 中。 我尝试设置主要...

回答 2 投票 0

如何在logstash中手动触发定时jdbc输入?

我有一个定时jdbclogstash输入并将数据加载到elasticsearch中。 输入 { jdbc { jdbc_connection_string =>“XXX” jdbc_user =>“XXX” jdbc_password => &...

回答 1 投票 0

Logstash 无法加载,文件不可读

尝试按照此答案使用 MongoDbJdbcDriver 在 MongoDB 和 Elasticsearch 之间同步。我使用 Docker Compose 进行开发,这就是 Logstash 的样子: 日志存储: 我...

回答 1 投票 0

从 Spring Boot 应用程序连接到 Logstash 时 Logstash-logback-encoder 连接超时

我在使用“net.logstash.logback:logstash-logback-encoder:7.4”启动 Spring Boot 3 应用程序期间收到以下错误 01:53:14,051 |-net.logstash.logback.appe 中的警告...

回答 1 投票 0

ssconvert - 如何指定特定字段格式

我正在寻找在Linux上使用ssconvert工具将.xlsx文件转换为csv时指定字段格式的方法。 我想要这些信息,因为实际上,我有一个位于浮动 PO 中的字段...

回答 1 投票 0

Elasticsearch - Logstash Grok 新字段日期格式是字符串而不是日期

我有一个场景,Logstash 使用 grok 将消息拆分为不同的字段。其中一个字段是 message_date 字段,该字段被提取并发送到 elasticsearch。 现在输入

回答 1 投票 0

logstash 管道中的加密

我有下面的java代码,它使用AES加密输入数据 SecretKeyFactory 工厂 = SecretKeyFactory.getInstance("PBKDF2WithHmacSHA256"); KeySpec 规格 = 新 PBEKeySpec(秒...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.