问题标签 [talend]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
1064 浏览

talend - 有没有办法在 Talend 中引用当前项目名称?

我正在建立一个 Talend 项目,我将用它作为未来许多项目的基础。如果作业运行成功或失败,我想发送一封通用电子邮件。我想在电子邮件主题和消息中动态包含项目名称。有没有办法从 Talend 项目中动态提取项目名称?如果是这样,语法是什么?

0 投票
2 回答
4019 浏览

talend - talend - 丢失了几条未插入数据库的记录

我对 talend 很陌生,两周以来我一直在努力解决这个问题

我需要诊断工作中发生的问题(见图)

当我执行我在屏幕上看到的作业时,它说有 1000 行已提交到数据库,但是当您转到数据库时,记录较少

有没有办法说明为什么提交给数据库的记录比屏幕上显示的要少?

工作

地图:

地图

0 投票
4 回答
2358 浏览

sql - SQL联合?或其他方法

我正在使用 SQL Server 2008 和 Talend

我面临的问题是,我在两个不同的数据库中有两个表,它们具有相同的字段,我正在尝试查询它们并满足某些条件。

用户具有查看表和所有表的正确权限。

这两个表我只需要几个字段,所以我创建了视图以使生活更轻松:Db USA 我创建了一个视图

(在视图中)

现在我想做的是用我的另一个数据库('MAIN')查询这个视图。

标准是如果 IDCUST 相同,那么我只想要“美国”数据库中的行。

我试过了:

尽管说 USA.dbo.VIEWUSA.IDCUST 不合适,但它有一个错误。

我尝试将其作为 JOIN,但我的连接根本不起作用(最大行数约为 6k,在我停止之前它以 100k 的速度查询。)

0 投票
2 回答
1314 浏览

java - 从略有不同的多个文件映射多个列

我正在寻找一种很好的实用方法来处理多个文件之间的元数据规范化,这些文件的架构略有不同,用于 Talend 中的批处理 ETL 作业。

我有几百个历史报告(每个大约 25K 到 200K 记录),每个 excel 文件大约有 100 到 150 列。所有文件的大多数列名都是相同的(98% 重叠),但是存在细微的邪恶差异:

  • 不同的列顺序
  • 不同的列名(有时使用,有时不使用缩写)
  • 不同的列数
  • 有时列在单词之间有空格,有时是点、破折号或下划线
  • 等等

除了编写专门的应用程序或通过手动更正它们来强制所有文件,是否有任何好的免费工具或方法可以以智能或半自动的方式提供文件列名之间的差异和更正?

0 投票
3 回答
4351 浏览

automated-tests - 如何在商业智能系统 (BI) 中执行自动化测试

我目前正在开发一个商业智能(BI)系统,现在我想尽可能地创建一些自动化测试。

我不知道如何在这个 BI 项目上开发自动化测试。有没有人有过 BI 测试的经验?

我只需要这个测试的一些想法。

这是我的项目的简短描述。

  1. 我的项目将使用 talend 作为 ETL 工具从任何感兴趣的数据源查询数据到我们称为 ReportDB(MySql 方案)的数据源
  2. 从 ReportDB 中,我将数据导出为以下格式
    • 使用 Talend 作为导出和汇总数据的工具的 CSV 文件
    • 使用 Eclipse BIRT 作为导出和汇总数据的工具的静态 Web
0 投票
1 回答
3411 浏览

java - java xml 选项无法识别

我正在使用一个名为 Talend 的 BI 数据集成工具,该工具使用 Java 在 Eclipse 上构建。

在启动工作时,它说

ini 文件:

我有一台 4GB 32 位 Windows 电脑。2.85GB 可用

0 投票
1 回答
370 浏览

talend - 有没有人通过 SSL 成功使用 Talend MDM 社区版?

我们已经设法让 talend MDM UI 通过 SSL 正常工作,但我们还没有设法让 MDM 工作室通过 SSL 与 MDM 服务器对话。有没有人管理过这个?我也没有尝试过 SSL 上的数据集成输入步骤。

我试过论坛 - 不高兴。

我怀疑出于某种原因这是不可能的——我怀疑这是因为当您在 TOS 中添加 MDM 服务器时,它会提示输入端口、主机名、用户名和密码。它没有提示输入协议。

假设EE版本肯定支持这一点?但是我们有一个非常简单的模型,不会像 OTT 那样使用 EE。

谢谢!担

0 投票
1 回答
354 浏览

c# - 如何读取 FoxPro 启动文件数据文件(文件扩展名 .FPM)

我有三个文件可以从中获取数据,但我无法获得它是什么类型的文件。

这些文件以 - TCPMLD.FPC、TCPMLD.FPK、TCPMLD.fpm 命名。

有什么线索可以让我使用 Talend 或其他 ETL 工具或 c# 或 Java 语言读取此文件吗?

0 投票
2 回答
1558 浏览

mysql - 将转换加载提取到 MySql

我基本上来自微软背景,在 SSIS 上为 ETL 寻求的项目做了大量工作。

现在我手头有另一个项目来处理将 .csv 文件加载到 MySql 数据库中。在加载这些表的过程中,数据必须经过一些转换,然后进入目标表。这是 ETL 项目的大部分内容。

客户没有 SSIS (BIDS),被迫使用开源工具。

我做了一些研究,发现Talend Data Integration工具最适合我的情况。

作为这个环境的新手,并且我确信这方面有专家,我需要一些关于执行此类 ETL 的最佳工具和最佳实践的建议。

如果需要任何进一步的信息,请告诉我。

0 投票
1 回答
17779 浏览

sql - SQL Server:我可以使用 EXEC 运行外部应用程序吗?

您好,感谢您的宝贵时间,

我一直在网上到处搜索一个例子,一个 SQL 触发器将运行一个外部应用程序,但我没有运气。我所看到的只是 EXEC 将执行一个 SQL 过程。

我需要这个的原因是,我有一个包含许多表的 SQL Server 2010,当某些表上发生更新或插入时,我需要我的 Talend 作业来运行和更新 Salesforce 表。

目前,Talend 作业正在通过 A 任务调度程序运行,但公司希望立即转移信息。

目前这是我的代码

我仍然需要进行所有检查以确保这不会导致任何崩溃,但 EXEC 语句似乎不想执行外部命令。任何建议将不胜感激。

谢谢