Spring Cloud Data Flow是用于构建数据集成和实时数据处理管道的工具包。管道由Spring Boot应用程序组成,使用Spring Cloud Stream或Spring Cloud Task微服务框架构建。这使得Spring Cloud Data Flow适用于各种数据处理用例,从导入/导出到事件流和预测分析。
每次在 Kubernetes 中取消部署和再次部署时,Spring Cloud Dataflow 部署名称都会更改
我们在AWS EKS中部署了Spring Cloud dataflow和Skipper的pod。我们已经注册了应用程序并创建了流。每当我们取消部署和部署流时,部署...
数据流仪表板中的Spring Cloud任务已完成但Spring Batch的一个分区失败
我有一个简单的 spring batch 远程分区项目与 spring cloud 任务一起运行。我在运行 spring batch 时使用 spring cloud dataflow。 春季启动版本 - 2.7.8 Spring Cloud 任务 - 2.4.5
通过 spring cloud dataflow skipper 的注释没有被传递到通过 scdf 部署的流应用程序
在这里,通过 skipper configmap 给出的 pod 注释没有传递到通过 scdf 部署的流应用程序。 在此处输入图像描述 当我描述流应用程序 pod 时,我无法...
我们有airflow作为工作流管理工具来调度监控任务,也有一些应用使用Spring云数据流,通过生产者和消费者对话来实现跨流程的松散耦合。
我们有一个需求,我们需要在Spring Cloud Dataflow服务器中只启用授权。自动授权将由一个内部工具完成。已经尝试过授权配置...
我们正在扩展SCDF中的rabbit mq源连接器,在kafka binder上运行,并添加额外的功能,可以使用函数来扩展,以添加额外的处理......
Spring Cloud Dataflow任务执行在后续运行中失败。
名称: spring-cloud-dataflow-server 版本: 2.5.0.BUILD-SNAPSHOT 我创建了一个非常简单的任务。第一次运行它总是很好地完成,没有任何问题。如果任务再次运行,它就会出现以下故障...。
我最近开始了解Spring云数据流,也叫SCDF。我刚开始看https:/codenotfound.comspring-batch-admin-example.html,看起来很不错的例子,...
我正在研究Spring Batch和Spring Cloud Data Flow的例子。在这个例子中,我创建了一个Spring Batch项目,目前只有一个任务,它从flatfile中读取数据并将数据加载到mongodb中。
我正在研究Spring Batch和SCDF的例子。在这个例子中,我正在使用Spring Boot代码创建spring-cloud-data-flow-server,并试图通过查看连接到MySQL DB。SCDF任务DB...
原因是:org.flywaydb.core.api.FlywayException。迁移失败!而Spring Cloud DataFlow
我正在做Spring batch和Spring Cloud Data Flow的例子。在这个例子中,我已经开发了spring-cloud-data-flow-server和MySQL DB,而不是默认的H2 DB,参考了数据库...
spring-cloud-dataflow服务器任务grafana仪表盘为空。
我在docker模式下,用Postgres grafana promotheus ad kafka与docker compose将示例应用部署到dataflow server 2.4.2。这个例子是:app register --name myTask --type task --uri ...
在Spring Cloud中安装ConfigMaps 在Kubernetes中部署的数据流。
我正在使用Spring Cloud Data flow进行微服务协调,并将它们部署在Kubernetes中。我的应用程序管道看起来像下面的东西。Source-app --> Processor-app --> Sink-app 我能够... ...
如何在Spring数据流服务器上将一个包含10个Spring批处理作业的应用程序分割成10个任务?
我有一个spring boot批处理作业的应用程序,它有大约10个作业(数量可能会根据需求增加)。我一直在尝试使用Spring云数据流服务器与本地服务器设置,以 ...
我正在尝试使用SCDF,并成功地将Spring Batch Jobs作为任务运行。但我遇到了一个关于任务参数持续存在的问题。似乎每次我需要执行任务时,我应该......
使用Spring Cloud Data Flow的流式分隔文件
我正试图从远程Linux服务器加载一个以标签分隔的文件,并使用Spring Cloud Data Flow将其加载到Postgres数据库中,但在选择适当的源和汇方面遇到了困难。对于源,我 ...
我正试图在新安装的本地服务器(Win 10 home)上注册一个应用程序。错误信息是 2020-05-26 07:13:25.274 ERROR 13112 --- [nio-9393-exec-6] o.s.c.d.s.c.RestControllerAdvice ...
如何在定义的端口中用SCDF启动一个应用程序。我试着传递属性 "deployer.myapp.local.javaOpts":"-Derver.port=11111",但管道现在没有被部署。
我在Spring Cloud Dataflow中定义了这两个任务,为了简单起见,我干脆把它们叫做first-task和second-task。然后我定义了一个合成任务: task create --name my-composed-task --......
Spring Cloud Data Flow自定义Scala处理器无法从启动应用程序发送接收数据(SCDF 2.5.1 & Spring Boot 2.2.6)。
我一直在努力为Spring Cloud Data Flow在Scala中创建一个简单的自定义处理器,并在向启动应用程序发送接收数据时遇到了问题。我一直在...