kafka-producer-api 相关问题

用于与Apache Kafka生产者API相关的问题。有关制作Kafka主题的任何问题。生产者失败和恢复,幂等性和事务性API。

Confluent Python Avro Producer:数据{'..'}不是该模式的示例

我无法为特定架构生成数据,也无法理解原因。通过使用合流的“ avro-random -...

回答 1 投票 0

Apache Kafka分区保证中的消息顺序

阅读有关主题分区中消息排序的本文:https://blog.softwaremill.com/does-kafka-really-guarantee-the-order-of-messages-3ca849fd19d2允许重试而未设置最大值。

回答 3 投票 4

包kafka.producer更改为kafka_2.11后不存在

我已将pom文件中的Kafka版本从2.10更改为2.11,现在我从 org.apache.kafka 了解pom中的错误更改。

回答 1 投票 0


如何在同一主题上使用globalKtable和StateStore?

只是为了澄清,我是Kafka的新手,很抱歉,如果我的问题似乎没有记载,我正在阅读教程,文档以及我能理解的一切。我正在尝试从GlobalStore中读取所有值...

回答 1 投票 0

如何在一条消息中向kafka产生音频(.wav)

为了使用大数据技术应用实时语音分析,我试图在一开始使用KAFKA。因此,首先我使用WAVIO API将.wav文件转换为字节,然后发送消息...

回答 1 投票 1

Kafka和数据库调用之间的Spring @Transactional问题

我正在尝试检查Kafka和数据库调用(Postgres)之间的事务状态,如果数据库调用失败,则Kafka不应将该特定消息发送到Kafka主题上。我是...

回答 1 投票 0

Kafka服务器节点因“打开的文件过多”错误而关闭

我们使用的是3个节点的Kafka群集,共有151个主题,每个主题都有1个分区。并且我们已经配置了复制因子= 3。当我们启动kafka经纪人时,出现以下错误:...

回答 1 投票 0

我如何立即在kafka和kafka-streams中获得所产生事件的结果?

我在以下情况下简化了我的问题:3个朋友共享一张会员卡。该卡有两个限制,最多可以使用10次(无论使用哪个卡,即friend_a都可以...

回答 1 投票 1

我如何在kafka和kafka-streams中获得所产生事件的结果?

我在以下情况下简化了我的问题:3个朋友共享一张会员卡。该卡有两个限制,最多可以使用10次(无论使用哪个卡,即friend_a都可以...

回答 1 投票 1

Spring Cloud Stream和Kafka:Kafka Producer序列化错误

我是Spring Cloud Stream和Kafka的新手。在有效负载中发送字符串时,我从kafka生产者收到以下错误。任何帮助或见解将不胜感激。我尝试过...

回答 1 投票 0

如何通过CLI /命 令行使用用户名和密码保护kafka主题?

我已经在Windows 10上安装了Docker,还安装了Kafka。我在Kafka集群中创建了一个“测试”主题。现在,我想使用简单的用户名和密码来保护主题。我是超级...

回答 1 投票 0

Kafka异步发布失败,是否抛出异常?

下面是我向kafka发布消息的代码。我需要知道在以下情况下会发生什么,当消息被异步发送并且没有得到所有relicas的确认时,它是否在客户端抛出异常?...

回答 1 投票 1

[发送到Kafka主题时获取某些消息的TimeoutException

Exception Stacktrace:org.springframework.kafka.core.KafkaProducerException:发送失败;嵌套的异常是org.apache.kafka.common.errors.TimeoutException:由于****-656,到期1条记录...

回答 1 投票 0

如何有效地从Seq [String]发送消息到Kafka主题

在我的Scala(2.11)流应用程序中,我正在使用IBM MQ中一个队列中的数据,并将其写入具有一个分区的Kafka主题。从MQ消耗数据后,消息有效负载就会得到...

回答 1 投票 0

Python,Kafka和Docker-KafkaConsumer一直挂着

我有以下docker-compose文件:版本:'3.1'服务:postgres_db:图像:postgres重新启动:始终环境:POSTGRES_USER:admin ...

回答 1 投票 0

Apache Kafka-生产者-生产者之间的幂等消息

我们在我们的项目中拥有微服务架构。有一个微服务,其中调度程序触发向Kafka发送消息的逻辑。问题是,如果有多个微服务...

回答 1 投票 0

Kafka:如何连接kafka-console-consumer以获取远程代理主题内容?

我在ec2上的一台机器上安装了kafka zookeeper和3个代理,端口为9092..9094,并尝试从另一台机器上使用主题内容。端口2181(zk),9092、9093和9094(...] >>

回答 4 投票 5

用于Apache Kafka的Spring:无法识别的生产者配置-'delivery.timeout.ms'

我有一个Spring Boot应用程序,带有用于Apache Kafka的Spring,用于将消息发送到kafka集群上的主题。我已经自动为delivery.timeout.ms和应用程序连接了属性...

回答 1 投票 0

kafka客户端正在将请求发送到发生故障的代理所在的分区

我正在使用kafka-node模块将消息发送到kafka。在一个集群环境中,我的主题有3个分区,复制因子为3。主题描述为-Topic:clusterTopic ...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.