spring-cloud-dataflow 相关问题

Spring Cloud Data Flow是用于构建数据集成和实时数据处理管道的工具包。管道由Spring Boot应用程序组成,使用Spring Cloud Stream或Spring Cloud Task微服务框架构建。这使得Spring Cloud Data Flow适用于各种数据处理用例,从导入/导出到事件流和预测分析。

如何在Spring云Dataflow中使用httpclient处理器?

我正在尝试使用spring cloud dataflow。我的具体使用案例是将GET请求的响应转储到一个日志中。我试图使用httpclient处理器来完成这个任务。但我不明白为什么它......

回答 1 投票 0

使用Function接口创建的Spring云流应用程序无法在Spring云数据流中进行数据通信。

我使用Spring云函数方法传输Flux创建了3个简单的Spring云流应用(SourceProcessorSink)。Source-app。@SpringBootApplication public class SourceApplication { ...

回答 1 投票 0

Spring Cloud Data Flow与Azure Event Hub的限制?

我们计划在Azure云上使用Spring Cloud Data Flow,使用Azure EventHub作为消息夹。在Azure EventHub上,有硬性限制:100个命名空间,每个命名空间10个主题。而Spring Cloud ...

回答 1 投票 1

如何向Spring Cloud Dataflow应用程序添加属性

我是Spring Cloud数据流的新手。我正在编写一个“源”应用程序,但无法弄清楚如何向该应用程序添加属性。我在文档中找不到任何帮助。我遵循了...

回答 1 投票 0

有条件地在Kubernetes集群的特定节点上启动Spring Cloud Task

我正在建立用于批处理的数据管道。而且我发现Spring Cloud Data Flow是一个非常吸引人的框架。没有对SCDF和Kubernetes的大量了解,我不确定是否...

回答 1 投票 0

SCDF聚合器仅发出最后一条记录

我目前正在试验一种用例,我们必须先将多个输入消息聚合到一个用例中,然后再将其写入文件系统。为此,我正在尝试使用聚合器模块...

回答 1 投票 0

如何解决通过字段'schedulerService'表示的不满意依赖性?

我正在尝试将自定义构建的SCDF2.5.1(要添加oracle驱动程序)安装到openshift中(遵循SCDF的Kubectl安装文档)。我修改了deployment.yaml以拉出此自定义SCDF泊坞窗...

回答 1 投票 1

spring-cloud-dataflow-server的自定义版本:2.5.0.RELEASE失败

我正在尝试创建“ spring-cloud-dataflow-server:2.5.0.RELEASE”的自定义版本以添加我的Oracle驱动程序。但这是失败的。我已经使用了用于2.2.0的依赖项22-05-2020 16:35:52.724 [main] ...

回答 1 投票 0

使用Openshift部署SCDF

我正在尝试使用Openshift控制台在Openshift中部署SCDF。我正在按照以下文章(使用kubectl进行部署)中给出的说明进行操作,这里有5个步骤,以便...

回答 1 投票 0

如何在Spring-data-flow-server的Task Execution Details页面中限制作业执行ID列表?

我有一组Spring Boot批处理作业,这些作业已部署在Spring云数据流服务中。我正在使用本地服务器配置。但我也想为我内部的每个作业设置计划选项。

回答 1 投票 0

从SCDF启动任务时,如何解决执行“ java.lang.IllegalArgumentException:无效的TaskExecution,ID 3”?

我正在尝试通过SCDF运行Spring批处理jar。我在读写时都使用了不同的数据源(两个Oracle DB)。我用来编写的dataSource是主要数据源。我使用自定义版本...

回答 1 投票 0

用于任务/批处理的Spring Cloud Data Flow Java DSL

我想知道是否有将java dsl注册为SCDF taks的java dsl支持?到现在为止,我只能找到对Java DSL的流支持。此方向上的任何链接都将...

回答 1 投票 0

尝试部署SCDF流时,找不到容器错误

我首先按如下方式注册接收器:应用程序注册--name mysink-类型接收器--uri文件:///Users/swatikaushik/Downloads/kafkaStreamDemo/target/kafkaStreamDemo-0.0.1-SNAPSHOT.jar然后创建了一个...

回答 2 投票 0

Spring Cloud DataFlow和MySQL不显示任务的START_TIME和END_TIME

我正在研究Spring批处理和SCDF示例。在此示例中,我正在读取CSV文件并将所有数据加载到MySQL。我能够成功地将数据加载到MySQL DB中,但是UI却不显示...

回答 1 投票 1

Spring Cloud Data Flow中子任务的重复端口

[当我使用Spring Cloud Data Flow启动新任务(Spring Batch Job)时,我看到SCDF使用一些“随机”端口自动初始化Tomcat,但是我不知道是否随机创建了端口或...]]

回答 1 投票 1

Spring Cloud Data Flow Grafana Prometheus未显示流数据

我在此网站上使用docker-compose启动Spring云数据流。 https://dataflow.spring.io/docs/installation/local/docker/我创建了3个应用程序,即Source,Processor和Sink。我跑了出口...

回答 1 投票 4

Spring Cloud Data Flow Grafana(Prometheus)未显示流数据

在Kubernetes上安装了Spring Cloud Dataflow(在DockerDesktop上运行)。根据安装指南将Grafana和Prometheus配置为https://dataflow.spring.io/docs/installation/kubernetes / ...

回答 1 投票 0

作为Spring-Cloud-Data-Flow流的一部分部署的Spring-Cloud-Function应用程序的错误Kafka主题名称

我有一个简单的SCDF流,看起来像这样:http --port = 12346 | mvmn转换|文件--name = tmp.txt --directory = / tmp mvmn-transform是一个简单的自定义转换器,看起来像这样:@ ...

回答 1 投票 0

使用UAA令牌对Spring Cloud数据流进行身份验证-停留在401

A尝试使用UAA服务器返回的令牌向scdf服务器进行身份验证。除了401我似乎什么也没得到。我也尝试过使用curl发送令牌-相同的结果。 (curl)令牌...

回答 1 投票 0

在Pivotal Cloud Foundry上运行的Spring Cloud Dataflow可以将文件写入内部服务器吗?

在过去的几个月中,我一直在尝试Spring Dataflow。我一直在使用Docker容器在自己的计算机上运行数据流。我有一些用例,要么抓住一个...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.