我可以在KSQL中成功创建和查看表和流,但它们没有显示为主题,所以我可以在Java Kafka Consumer上使用它们。
发生了什么:
ksql> CREATE TABLE RTSHTABLE (primaryKey BIGINT, secondaryKey BIGINT) WITH (KAFKA_TOPIC = 'rtsh', VALUE_FORMAT='JSON', KEY='primaryKey');
Message
---------------
Table created
---------------
ksql> SHOW TABLES;
Table Name | Kafka Topic | Format | Windowed
----------------------------------------------
RTSHTABLE | rtsh | JSON | false
----------------------------------------------
ksql> SHOW STREAMS;
Stream Name | Kafka Topic | Format
------------------------------------------------------------
RTSHSTREAM | rtsh | JSON
KSQL_PROCESSING_LOG | default_ksql_processing_log | JSON
------------------------------------------------------------
ksql> SELECT * FROM RTSHTABLE LIMIT 5;
1555406522968 | m�l | 1830743660 | 1968383301
1555406522969 | 0��N | 819984462 | 1390795850
1555406522969 | m�� | 1830743753 | 1968383301
1555406522969 | m� | 1830743691 | 1968383301
1555406523501 | o)� | 1865005575 | 797470537
Limit Reached
Query terminated
ksql> SHOW TOPICS;
Kafka Topic | Registered | Partitions | Partition Replicas | Consumers | ConsumerGroups
---------------------------------------------------------------------------------------------------------
default_ksql_processing_log | true | 1 | 1 | 0 | 0
rtsh | true | 1 | 1 | 0 | 0
---------------------------------------------------------------------------------------------------------
好吧,我需要从Java Kafka Consumer消费来自RTSHTABLE的数据,但由于消费者无法连接到名为RTSHTABLE的主题,因此无法正常工作。
我在文档中读到KTable被认为是一个主题,并且可以像任何其他主题一样正常使用。那么,我在这里想念的是什么?
提前致谢。
RTSHTABLE
的主题是rtsh
。这正是SHOW TABLES
告诉你的:
ksql> SHOW TABLES;
Table Name | Kafka Topic | Format | Windowed
----------------------------------------------
RTSHTABLE | rtsh | JSON | false
----------------------------------------------
表和流只是主题之上的语义模型。在引用的SQL代码中,您只是在现有主题上“注册”该表。
如果你CREATE STREAM foo AS SELECT …
或CREATE TABLE foo AS SELECT …
那么它也将创建一个基础主题。