问题标签 [talend-mdm]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
0 回答
55 浏览

hadoop - 从 Talend 连接到 Hadoop

我正在尝试使用 Thdfsinput 从 Talend 连接到 Hadoop,但是当我运行作业时出现此错误:

Talend 中的错误

我正在使用 Talend Open Studio for Big Data V7.3 和 Java 版本 8。

0 投票
2 回答
144 浏览

java - 在 Talend 中定位自动增量

所以我有点迷路,真的不知道如何挂断这个......

考虑到我在 Talend 中有一个 2 DB 表,首先说一个表 invoices_only,它具有字段、invoiceNummer 和这样的作者

在此处输入图像描述

然后,一个带有字段(invoiceNummer、article、数量和价格)的表 invoices_table,对于一张发票,我可以有很多文章,例如

在此处输入图像描述

并通过 tmap 想要获得一张表 invoice_table_result,有新的列,一个为文章位置,一个为总价。对于我知道我可以使用类似 Numeric.sequence("s1",1,1) 函数的位置,但不知道如何在找到新发票编号时重新启动我的计数器,当然还有总价这只是一个基本的乘法

所以我的结果应该是这样的

在此处输入图像描述

这是我的 talend 工作草稿,我在 invoice_only 表和 invoices 之间查找 invoicenummer 在此处输入图像描述

有什么建议吗?谢谢。

0 投票
3 回答
107 浏览

java - 从多行生成 1 行 Talend

我在论坛上找到了我所需要的完全相反的逻辑,所以我不得不问:)

我有这样的字段

|sector|EmployeeNr|Name|Reason|startTime|EndTime|

有了这种样本数据

我想要一个结果,同一原因连续几天缺勤的单行

像这样的东西

我认为这应该类似于 Date、Reason 和 EmployeeNr 的聚合,但不知道如何处理这个问题。

请问有什么帮助吗?

0 投票
1 回答
130 浏览

snowflake-cloud-data-platform - 如何使用 talend 在 snwoflake 表上执行 SCD 1

我对 Talend 很陌生,我需要对 snwoflake 表执行 scd1 操作。谁能建议我在 talend 中执行此操作所需的重要组件。我尝试使用 tDBSCD,但它不允许雪花数据库。是否有任何解决方法来执行该任务。任何帮助,将不胜感激。

谢谢

0 投票
1 回答
233 浏览

etl - 如何使用 talend 将 json api 加载到数据库中

我是 Talend 的新手。这是我的 API =>http://api.dss.adapt-odisha.com/aagro?url=https://mausam.imd.gov.in/api/warnings_district_api.php

这是创造的设计=>

在此处输入图像描述


在 tXMLMap

在此处输入图像描述


但是当我运行这个时,我没有得到数据

在此处输入图像描述


我该如何解决这个问题?

在此处输入图像描述

0 投票
1 回答
265 浏览

etl - 如何更改 tRestClient 的查询参数值

我是新来的。我从过去 2 天开始就在做这件事,但没能做到。我想将 api 数据消耗到我的数据库中。我有这个 API =>
http://api.dss.adapt-odisha.com/aagro?url=https://mausam.imd.gov.in/api/nowcast_district_api.php

这给了我所有地区的数据。我可以使用所有地区数据,但我的要求是,我想加载少数地区的数据,我的 url 只支持一个地区 id 作为查询参数,像这样=>

像这样

这些 url 仅显示我在查询参数中传递的那个地区的数据。我可以使用所有地区数据,但我只想存储这些地区的数据。我怎样才能实现它?
到目前为止我已经尝试过了:

在此处输入图像描述

0 投票
1 回答
32 浏览

etl - 在 tLogRow 中获取错误的日期

在 tLogRow1(trestclient 之后)我得到正确的日期。但是在 tXmlMap 之后,我得到了错误的日期。

tLogRow1 输出 =>

<Date>2020-08-21</Date>

但在 tLogRow2 输出 =>

对于我写的日期表达式的 txmlmap 中的那个,TalendDate.parseDate("yyyy-MM-dd",TalendDate.formatDate("yyyy-MM-dd",[row4.body:/root/root/Date])) 但结果仍然是相同的。

在此处输入图像描述

0 投票
0 回答
53 浏览

salesforce - 如何提高 Talend Cloud Jobs 的性能以连接销售人员

我在 Talend 中创建了一个工作来从 Salesforce 中捕获数据并将其作为目标放入雪花中。为此,我遵循了以下架构。

tsaleforceinputComponent -----> tsnowflakebulkoutput -----> tsnowflakeBulkExec

我在 tsaleforcecomponent 中使用查询模式并尝试捕获机会表数据。该表有大约 400 万条记录。当前作业首先使用 tsnowflakebulkloutput 将数据复制到 azure blob 作为暂存区域,然后使用 tsnowflkaebulkexec 组件将其复制到雪花中。

该作业在远程服务器上执行,配置如下:

目前所用时间约为 11 小时。

有什么方法可以提高工作或远程服务器的性能,以减少市场上其他工具花费的时间。

如果需要更多详细信息,请告诉我。谢谢

0 投票
1 回答
239 浏览

talend - 如何设置 Talend 中现有子作业的执行顺序?

我在 Talend 的一个作业中有许多子作业,我希望能够选择它们应按顺序执行的顺序。我怎样才能做到这一点?

0 投票
2 回答
184 浏览

talend - 什么组件可用于使用 Talend 复制 excel 文件的每一行?

如果我有一个包含这样行的 excel 文件:

那么我需要结果是这样的:

Talend 可以做到这一点吗?

编辑:注意行的顺序。我需要他们维持秩序。