apache-storm 相关问题

Storm是一个分布式实时计算系统。类似于Hadoop如何提供一组用于进行批处理的通用基元,Storm提供了一组用于进行实时计算的通用基元。 Storm很简单,可以与任何编程语言一起使用

ES查询异常

我使用stormcrawler 1.16和elasticsearch-7.2.0.java版本是1.8.0_252.storm版本是1.2.3,maven版本是3.6.3.我使用mvn archetype创建了项目--mvn archetype: ...

回答 1 投票 0

与Cassandra的Storm-Crawler集成和在Gradle中构建拓扑

我试图在我的项目中实现Storm-Crawler,但是我需要与Cassndra和Gradle合作。我对Storm-Crawler和ElasticSearch堆栈很开心,但是在这种情况下,我不得不使用此...

回答 1 投票 0

是否可以使用风暴和弹性搜索进行实时搜索的视频课程?

使用Apache Storm和弹性搜索进行实时搜索时是否可以使用逐步课程?] >>

回答 1 投票 0

从PostgreSQL流数据

我正在寻找有关使用WAL从Postgres流式传输和检索数据到其他数据库的有效方法的建议。关于使用Java实现流传输的好方法的任何想法。哪个流应该是...

回答 1 投票 0

在流处理中从大型数据集过滤

我正在开发流应用程序,输入流是一系列事件。对于每个事件,我需要从关系数据库中过滤掉有效的订户。 eventId =>(eventId,[...

回答 1 投票 -1

拓扑仅在远程模式下处于Storm空闲状态

我有一个Stormcrawler拓扑(从生成的拓扑中稍作修改),对于在本地模式下的30年代来说可以正常工作,但是当我添加--remote并提交它时,它已在Storm中注册,但是简单地...

回答 1 投票 0

Storm远程模式给出错误“无法创建虚拟机”

我正在尝试在本地计算机上模拟远程风暴模式。我下载并安装了zookeeper和Storm。我启动了Zookeeper,nimbus主管以及UI。然后,我通过jar提交了拓扑。 ...

回答 1 投票 0

第99个百分位延迟和吞吐量的含义是什么

我已经读过一些文章,它们对Spark处理,Storm和Flink等流处理引擎的性能进行了基准测试。在评估部分中,标准是第99个百分点和吞吐量。对于...

回答 1 投票 1

覆盖从命令行运行jar时pom.xml中指定的主类

我在maven项目中有2个具有主要方法的类。(NOT SPRING BOOT)A类和B类A {public static void main(String [] args){System.out.println(“ CLASS A”); }}类...

回答 2 投票 1

Hive意外的DataOperationType:UNSET

[尝试从Storm-hive客户端持久保存hive表,在HiveMetastoreServer日志中获取以下日志。 020-02-26 23:20:27,748错误org.apache.thrift.server.TThreadPoolServer:[pool-8-thread-178]:...

回答 2 投票 0

暴风雨中的本地混编分组

考虑拓扑的以下配置:#spouts:2 #bolt:8 #workers:3使用此配置,其中一个worker将没有spout,并且如果我们在spout和...之间应用localorshuffle分组,

回答 1 投票 0

Apache STORM-元组在工人中的分布

我正在使用Apache STORM进行项目,并且我所使用的拓扑依次包括Spout,BoltA(2个执行器)和BoltB(1个执行器)。喷口-> ...

回答 1 投票 0

Apache Storm集群未将拓扑的组件分配给所有可用的工作程序

我的拓扑被配置为使用14个工作器,并且我目前在集群中有16个工作器。但是,当我提交拓扑时,Storm UI上的“工作人员资源”部分显示所有14 ...

回答 1 投票 1

Apache Storm中的调度/放置控制

我正在由2个节点组成的Storm集群中运行单词计数拓扑。一个节点是主节点(具有Nimbus,UI和Logviewer),然后两者都是具有1个Worker的Supervisor。换句话说,...

回答 1 投票 0

为什么当我将元组发送到ElasticSearch时,我的风暴拓扑没有确认

我刚开始使用Storm,我刚刚开始了Data Architect培训课程,而在这种情况下,我正面临着今天带给我的问题。我正在通过...

回答 1 投票 0

NoClassDefFoundError:kafka / api / OffsetRequest for Storm jar

我正在尝试将Storm拓扑提交给集群,但是我不断收到相同的错误:线程“ main”中的异常java.lang.NoClassDefFoundError:org.apache.storm上的kafka / api / OffsetRequest。...

回答 1 投票 1


InvalidTopologyException(msg:Component:[x]从不存在的流[y]中订阅

我正在尝试从卡夫卡读取数据并使用Storm插入cassandra。我也配置了拓扑,但是遇到了一些问题,我不知道为什么会这样。这是我的...

回答 1 投票 0

过滤数据螺栓风暴

我有一个简单的Storm拓扑,该拓扑从Kafka读取数据,解析并提取消息字段。我想通过字段值之一过滤元组流并执行计数...

回答 1 投票 0

在Storm中禁用自动背压

在Storm的早期版本中,似乎可以通过将topology.backpressure.enable设置为false来禁用自动背压。但是,对于最新版本的Storm(我正在使用Storm 2 ....

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.