有没有办法将融合式架构注册表与kafka-node模块一起使用?

问题描述 投票:6回答:1

我已经在node.js中实现了Avro模式,该模式与消息有效负载一起发送。而且工作正常。我正在寻找是否可以将架构注册表与Kafka-node模块一起使用。我进行了探索,但未成功找到任何东西。

并且在每条消息中发送模式会增加消息大小?与使用架构注册表相比,它会影响性能吗?

对此将提供任何帮助。

node.js apache-kafka avro confluent confluent-schema-registry
1个回答
0
投票

您可以使用“ avro-schema-registry”模块。它为我工作。我也是Kafka的新手,只需尝试一下。

const kafka = require('kafka-node');
const avroSchemaRegistry = require('avro-schema-registry');

/* Configuration */
const kafkaTopic = 'newkafkatopic';//'kafka.test';
const host =  'localhost:9092';
const schemaRegistry = 'http://localhost:8081';

const Consumer = kafka.Consumer;
const Client = kafka.KafkaClient;
const registry = avroSchemaRegistry(schemaRegistry);

var client = new Client(host);
var topics = [{
  topic: kafkaTopic
}];

var options = {
  autoCommit: false,
  fetchMaxWaitMs: 1000,
  fetchMaxBytes: 1024 * 1024,
  encoding: 'buffer'
};

var consumer = new Consumer(client, topics, options);

consumer.on('message', function(rawMessage) {
  console.log("Raw Message", rawMessage);

  registry.decode(rawMessage.value)
    .then((msg) => {
      console.log(msg)
    })
    .catch(err=>console.log(err))
});

consumer.on('error', (e) => {
  console.log(e.message)
  consumer.close();
})
© www.soinside.com 2019 - 2024. All rights reserved.