问题标签 [azkaban]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
3 回答
1375 浏览

oozie - Azkaban:工作流中的条件执行

我需要在我的工作流程中注入条件执行。例如:如果满足特定条件,则应执行特定工作流。如果不是,则应执行不同的工作流程。

据我了解,Azkkaban 中没有直接的功能支持这一点。只有 Oozie 支持它。想知道 Azkkaban 用户是如何处理这个问题的吗?我相信每个人都必须以某种形式面对这个问题。

谢谢,克兰蒂

0 投票
1 回答
859 浏览

scheduling - Azkaban:运行 Azkaban 执行服务器集群

我是否可以在集群中运行 Azkaban Executor Service。如果一个节点出现故障,那么另一个节点能否接起并运行预定的作业?我还没有看到任何关于这种设置的文档。

我在某处读到的只是我们只能为每个 Web 服务器运行一个 Executor Service。但理想的容错架构是让 Web 服务器和执行服务器独立运行。

有没有人处理过这种情况。如果您有任何指示,请告诉我..

谢谢,克兰蒂

0 投票
2 回答
1111 浏览

ldap - Azkaban 的 LDAP 身份验证

我们正在尝试在我们的生产环境中使用 LDAP 身份验证设置 Azkaban。关于如何做到这一点的任何线索?文档说可以通过扩展 UserManager 类来添加插件 jar 文件来完成。我是 azkaban 的新手,正在寻找一些示例代码

0 投票
1 回答
738 浏览

azkaban - azkaban solo - 日志保留期为 12 周?

azkaban-solo-2.5.0 执行日志似乎在 1 天后被删除。但其文件称 azkaban 的日志保留期为 12 周。

我在混淆哪一部分?

如何更长时间地保存执行日志?

0 投票
2 回答
321 浏览

java - 如何将 slf4j 日志更改为 html 链接

我有java代码:

我想以 url/html 链接的形式将 myURI 显示到 Azkaban 的日志中,以便通过单击打开它的 url。我正在使用 log4j 进行日志记录。

0 投票
1 回答
1693 浏览

java - 阿兹卡班流量参数

您如何为每项工作设置流量参数?我正在尝试配置自定义警报器,并且我希望每个作业都能触发它。看起来它正在从流参数中寻找“alert.type”属性,但现在我只能设法通过界面触发它。有任何想法吗?

0 投票
1 回答
356 浏览

azkaban - 我想为 Azkaban 创建自己的插件

我正在尝试做我在这封邮件主题上写的内容。

但互联网上的信息数量似乎很少。

有人知道那个或有用的网页吗?

0 投票
1 回答
59 浏览

azkaban - azkaban 3.0 工作 ID 不变

我正在尝试使用 Azkaban 3.0 进行一些测试。目前,每当我启动一个已经启动的项目时,我都会面临一个问题。因此,在为新运行分配执行 id 之前,它将与上次运行使用的最后一个执行 id 相同,这导致作业没有被执行。我很确定这是异常行为,我尝试重新启动 azkaban,但问题仍然存在。有什么建议么?

0 投票
2 回答
673 浏览

azkaban - azkaban 不断更改执行人 ID

我正在使用 Azkaban 3.0,我将它放在有两个执行程序的服务器上。我有一个正在运行的简单回显作业,我通过在流参数中设置 setExecutor=id# 来指定执行器。但是每当我运行 tise 作业时,尽管它在作业定义中明确指定仅在第二个执行器上运行,但它会在两个执行器之间交替执行。

我需要更改配置中的某些内容吗?我用 executors 重新启动了 azkaban,但它没有帮助。

提前致谢!

0 投票
2 回答
902 浏览

hadoop - HDFS、HBase、Pig、Hive和Azkaban之间的关系?

我对 Apache Hadoop有点陌生。我已经看过这个这个关于 Hadoop、HBase、Pig、Hive 和 HDFS 的问题。他们都描述了上述技术之间的比较。

但是,我已经看到,通常 Hadoop 环境包含所有这些组件(HDFSHBasePigHiveAzkaban)。

有人能以架构工作流的方式解释这些组件/技术与它们在 Hadoop 环境中的职责之间的关系吗?最好举个例子?