oozie-coordinator 相关问题

Oozie Coordinator系统允许用户定义和执行循环和相互依赖的工作流作业(数据应用程序管道)

杀死协调器后如何让oozie工作流程运行?

我已经使用oozie有一段时间了,我想杀死一个协调员,但我不想杀死由协调员启动的工作流程。 我为什么要这么做?我有一个场景

回答 2 投票 0

重命名 Hive 表中的列时,它会在部署之前删除该列先前数据的所有值

我们刚刚继续部署一个基于 Hive 的表。我们将列risk_old重命名为risk_new(重命名)。该表按周期分区。然而部署后,我们看到了一个奇怪的情况

回答 1 投票 0

如何触发现在计划的ozie工作?

我使用以下命令向Oozie提交了一个任务: oozie job -config ${config_file}。-submit 我的工作被安排在每天5UTC运行(频率=1440)。我的问题是--如何触发...。

回答 1 投票 0

Oozie和输入事件

我们在Cloudera上有标准的日常摄取工作流。我正在寻找一种方法来重现一些原生的AWS行为,当使用ozie创建文件时触发spark作业。我发现输入事件,...

回答 1 投票 0

在未来日期运行Oozie行动

我有一个需求,工作流是按需运行的,但有一个任务(curl命令)在未来的时间被触发。

回答 1 投票 0

oozie时区如何工作,它没有选择正确的时区?

我在CDH集群上运行ozie工作。我有以下的协调器

回答 1 投票 0

Oozie属性文件值未从火花读取

我在ozozie中有一个属性文件,并从如下所示的shell脚本中获取值:shell脚本中的filter_cond = record ='n'和name ='abc'和age = '14'val cond = $ {getproperty filter_cond} ...

回答 1 投票 0

Oozie-每天或每小时运行一个工作流

我有一个oozie工作流程(hive_insertion.xml),该工作流程执行一个.hive文件,该文件将数据插入表中。 Oozie工作流程为:

回答 1 投票 1

通过REST在oozie工作流程中获取oozie职位信息

我如何找到父母ID为空的工作?我尝试了3种方法,但没有一种对我有用。 / oozie / v1 / jobs?jobtype = wf&filter = parent_id =%00不起作用/ oozie / v1 / jobs?jobtype = wf&filter = ...

回答 1 投票 -1

oozie-java.lang.NoClassDefFoundError:无法初始化类java.net.NetworkInterface

[在运行oozie示例示例时,正在安排Oozie作业,并且状态显示为“正在运行”。一段时间后,工作被杀。在挖掘hadoop日志时发现了这些异常。我有...

回答 1 投票 0

oozie java.io.IOException:方案无文件系统:hdfs

我已经使用Hadoop 2.7.3设置了oozie 4.3.1。 oozie已成功设置并运行,并且能够查看Web控制台http:// localhost:11000 / oozie /,还可以使用oozie status命令进行确认。 ...

回答 1 投票 0

如何处理oozie协调器中的日光节约?

由于日光节约,我所有计划的工作(使用oozie)都在稍后的一个小时内运行。在DST之前:我的工作在DST之后的每天8:00 pm运行:现在,工作在9:00 pm可以运行,就可以知道... ...>

回答 1 投票 0

Oozie命令行过滤器

oozie job -info $ coordinator该命令为您提供了属于协调器的工作流程的详细信息,打印其ID,状态,创建时间和标称时间。我正在尝试打印...

回答 1 投票 0

如何在Oozie中全局配置此电子邮件操作?

我有大约50个这样的工作流程,下面的代码只是一个示例, [

回答 1 投票 0

如何获得Oozie的依赖性检查以列出数据集的完整路径名而不是coord:latest(0)?

[使用Oozie协调器和工作流程,我在协调工作日志中看到以下特定操作:JOB [0134742-190911204352052-oozie-oozi-C] ACTION [0134742-190911204352052-oozie-oozi-C @ 1] [ ...

回答 1 投票 0

oozie在Shell脚本中运行Sqoop命令

我可以在脚本中编写sqoop导入命令,并在oozie中作为协调员工作流程执行它吗?我已经累了,发现一个错误,说即使我给出了绝对的...也找不到sqoop命令...

回答 3 投票 1

如何在实际运行之前检测oozie工作流中的错误?

我是大数据的新手,想知道在运行它之前是否有办法检测oozie工作流程中的错误?类似于编译错误的东西。请帮忙。谢谢,安妮

回答 3 投票 0

Oozie - 谷歌云存储 - 删除文件

我想从oozie中删除谷歌云中的文件。我正在创建一个虚拟脚本并通过oozie执行它。我有一个准备声明,我说“删除gs:// .....”它不起作用...

回答 1 投票 0

如何找到由oozie(hadoop)工作运行的hadoop应用程序

我们知道第一个oozie运行一个hadoop作业并使用该作业运行其他hadoop应用程序。所以我想找到oozie运行的那些hadoop应用程序列表(例如application_231232133)(...

回答 2 投票 0

OOZIE workflow.xml没有函数映射到名称coord:nominalTime

我正在使用Oozie SLA功能。我正在尝试使用$ {coord:nominalTime()}作为标称时间。但是,当我安排工作流程时,它会抛出错误。 E0803:E0803:IO错误,E1004:表达式语言......

回答 2 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.