Spring Cloud Data Flow是用于构建数据集成和实时数据处理管道的工具包。管道由Spring Boot应用程序组成,使用Spring Cloud Stream或Spring Cloud Task微服务框架构建。这使得Spring Cloud Data Flow适用于各种数据处理用例,从导入/导出到事件流和预测分析。
为 Spring Cloud Dataflow 设置 jdbc 源应用程序时如何解决 Oracle 驱动程序错误?
我正在尝试使用 Spring Cloud Dataflow 建立一个 ETL 管道,其中 Oracle 作为源,自定义应用程序作为处理器/转换器,MySQL 作为接收器。 Oracle 也被用作数据...
Kubernetes 中 Spring Cloud Data Flow 部署的应用程序的状态集
我知道这个问题是去年提出的,当时不受支持,但它仍然一样吗? 在SCDF(Spring Cloud Data Flow)中,如何将应用程序(流或任务)部署为有状态集?不是
如何让任务重用之前在 Spring Cloud DataFlow 中成功运行的所有属性
我正在 Kubernetes 中运行 Spring Cloud Dataflow,由于某种原因,只有上一次运行的部分属性会在下次运行时重用。 这是上次运行的属性列表 然后我...
我正在编写简单的应用程序来熟悉Spring Batch。我想学习 Spring Batch admin,但我发现它已被弃用,所以我必须使用 Spring Cloud Data Flow。 我发现了一个
具有独立接收器和源的 Spring Cloud Data Flow 应用程序
我想使用 SCDF 部署此应用程序。它接收消息(接收器),通过非确定性或简单的管道系统异步处理它。最后,可能...
我在 kubernetes 中安装了最新的 SCDF,并且我的 spring 云任务与 springboot 2.x 运行良好 但是,当我升级到 springboot 3.x 并运行时,我不断出现错误“Invalid TaskExec...
kubernetes 上的 Spring Cloud Data Flow jar 任务
如何在 Kubernetes 中运行的 SCDF 中以 Java jar 文件的形式运行任务? 为了确定启动平台,我使用以下配置图: api版本:v1 种类:ConfigMap 元数据: 名称: scdf 服务器 拉...
尝试在 Pivotal CloudFoundry 上将 Spring Cloud Dataflow v2.9.4 更新到 2.11.2,但在部署过程中出现错误
我正在尝试将 Spring Cloud DataFlow 实例从 2.9.4 更新到 2.11.2,但在部署到 PCF (Pivotal CloudFoundry) 环境期间遇到错误。我完全不确定...
我在 Spring Cloud 数据流中运行任务时收到以下消息。 DEBUG 13167 --- [spring_batch146] com.zaxxer.hikari.pool.HikariPool:HikariPool-2 - 添加连接已删除,等待...
SCDF 在 K8s 安装上添加了额外的 Cloud Foundry 特定 Props
我们正在使用 bitnami helm 图表在 K8s 集群上安装 Spring Cloud Dataflow 和 Skipper。 一切正常,我们能够部署流。 但请注意,很少有适当的...
通过 SpringCloud 数据流服务器 2.11.2 运行且任务执行 ID 无效时,Spring Cloud 任务执行失败,但在 2.10 上运行正常
我正在编写一个 Spring Cloud 任务(Spring Boot 3,Java 17),它读取平面文件并将其插入数据库。所以这是一个多数据库场景。通过 SpringCloud 数据流服务器 2 运行......
如何在 kubernetes 中为通过 Spring Cloud 数据流部署的应用程序创建路由/入口
我们正在努力在 kubernetes 集群中设置 Spring 云数据流。想知道如何从集群外部启用对已部署应用程序的外部访问。 我们基本上是从...
Spring Cloud Dataflow kafka-source-kafka 抛出错误
我正在尝试使用 SCDF kafka-source-kafka 作为 kafka 供应商配置创建一个 Steam 应用程序。以下是将外部源 kafka 配置为消费者配置的属性。 应用程序.kafka-s...
我在SCDF中注册了一个Spring Cloud任务应用程序。任务名称和定义在 TASK_DEFINITIONS 表中正确显示。但是当我启动任务时,该任务被注册为 “组织。
使用Prometheus监控和管理Spring Cloud Data Flow(SCDF)服务器
是否可以使用Prometheus监控和管理Spring Cloud Data Flow(SCDF)服务器本身? 我知道,我可以监视和收集 SCDF 服务器中部署的 jar 的指标(即源代码,
DataflowTemplate 在构造函数调用时进行 HTTP 调用
当我调用构造函数时,我用来启动部署到 Spring Cloud Dataflow 的任务的 DataFlowTemplate 会执行对 SCDF 服务器的 HTTP 调用,例如 新的数据流模板(...
带有 Oauth2 安全配置的 Spring Cloud Data Flow http 源应用程序
我试图在 SCDF 中的 http-source-kafka 连接器上配置 Oauth2 服务器。没有此类属性可用于配置 Oauth2 相关配置。 allowed.endpoints=xxx 受限制。
Spring-cloud-dataflow:如何默认使用 RabbitMQ 绑定器来创建仲裁队列
我正在使用最新的 Spring Cloud Dataflow,使用 RabbitMQ 作为消息代理,并注意到从 http-source 和 log-sink 在 RabbitMQ 上创建的队列是经典的......
Spring Cloud Dataflow 和 Mysql 5.6 的问题
尝试启动连接到Mysql 5.6的SCDF服务器时遇到以下问题。 使用以下命令启动连接到 mysql 数据库(版本 5.6)的 SCDF 服务器: java -jar spr...
找不到 Spring Cloud 数据流的仪表板 - 404
我正在尝试创建一个 Spring Cloud Dataflow 服务器 v2.10.3,但是当我运行该项目时,我无法访问仪表板,它给了我一个 404 错误...... 这是我的主要课程: @EnableDataFlowServer @