问题标签 [dataflow]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
2100 浏览

uml - 示例结构的 UML 数据流图策略

描述以下内容的最佳策略是什么:

1) A 类创建了 B 类和 C 类的实例 2) B 类能够通过 B 类中的指针与 D 类中的特定成员进行通信

提前感谢您的建议,因为我不知道合适的术语来描述它们,以便在互联网上搜索更多信息。

0 投票
1 回答
282 浏览

documentation - 项目干系人数据字典以外的数据文档?

我正在寻找某种文档模板或指南来生成描述数据流、高级数据字段定义、数据所有权(谁生成主数据)等的文档。

不是真正的数据字典,而是面向作为项目利益相关者的业务用户(非技术人员)的东西。

任何人都知道任何这样的模板/文档样式,还是我需要定义某种自定义文档来满足这种需求?

0 投票
5 回答
7023 浏览

ssis - 测量 SSIS 数据流的进度

我正在运行一个 SSIS 包来从一个平面文件中加载一百万行,该文件使用一个脚本任务来进行复杂的转换和一个 SQL Server 表目标。我试图找出在数据流处理期间将行数(可能以 1000 的倍数更有效)写入不同表的最佳方法(嗯,现阶段的任何方法)。这样我就可以通过定期查询表来确定可能需要几分钟的任务的进度百分比。

我似乎无法将任何 SQL 任务添加到流程中,所以我猜测唯一的方法是连接到 .NET 脚本中的 SQL 数据库。这似乎很痛苦,我什至不确定这是否可能。还有其他更优雅的方式吗?我已经看到对“Rows Read”性能计数器的引用,但不确定我在 SSIS 中的何处访问它,并且仍然不确定如何在数据流处理期间将其写入 SQL 表。

任何建议表示赞赏。

格伦

0 投票
4 回答
16484 浏览

ssis - SSIS 数据流脚本任务错误处理

我有一个在 SSIS 数据流中间执行转换的脚本任务。如果脚本失败(比如说它试图将 alpha 转换为数字),我需要它以“失败”状态停止并返回到主包,然后利用 Dataflow 任务事件处理程序OnError正常退出。

目前我发现数据流中的脚本任务返回一个 .net 错误弹出窗口,然后我必须清除它。我在代码周围尝试了一个 Try Catch,这似乎停止了调试窗口的出现,但我似乎无法让它以“失败状态”退出脚本,这将导致包失败。Dts.TaskResult = Dts.Results.Failure 在数据流任务中似乎无效。目前我正在尝试这个:

...但这所做的只是跳过坏行。数据流继续。问题是让它以“失败”退出,因此会触发包中的 onError 错误处理程序事件。

任何建议都非常感激。格伦

0 投票
10 回答
495 浏览

programming-languages - 是否有任何编程语言中变量是真正的函数?

例如,我会写:

它会输出:

此外,在任何情况下这实际上可能有用吗?

澄清:是的,lambdas 等解决了这个问题(他们是我如何得出这个想法的);我想知道是否存在默认的特定语言:不需要或不需要函数或 lambda 关键字。

0 投票
6 回答
1184 浏览

database-design - 数据流图?

我是一名数据库程序员,但我从未使用过数据流/图表程序。我想向客户解释一些数据图。问题 - 什么程序可以让我轻松创建图表来解释一些数据表和流程(窗口)?

0 投票
1 回答
413 浏览

ssis - SSIS 2008 中的主从迁移

我有两个 MSSQL 2008 数据库 dbA 和 dbB,dbA 包含主从表对:AMaster、ADetail。与之对应的dbB还包含BMaster和BDetail。A 和 B 之间的唯一区别是主键的类型。在源数据库 (dbA) 中,它是整数,但在目标 (dbB) 中,它是唯一标识符。

亲爱的同事:如何描述SSIS中的数据流来转换这种情况?我需要转换所有字段,但用新的键类型替换它。

0 投票
1 回答
892 浏览

ssis - OLE DB 在 SSIS 数据流中获取 BlobColumn 数据

当我在 DataFlow 中使用 ADO.net 源来读取 Blob 列并将其传递给脚本组件以进行进一步验证时 - 需要脚本组件对每一列进行进一步验证以生成主/子错误记录主(每行)和子(对于每个错误列)。这工作正常。

由于我需要参数化我的源,我不能使用 ADO.net,而是需要使用支持参数的 OLEDB 源。当我使用这个 OLEDB 源时,脚本组件无法识别 OLEDB 源传递的 BLOB 数据。它报告数据类型问题,即将非unicode 转换为unicode。

如何才能做到这一点。

问候

0 投票
3 回答
330 浏览

parallel-processing - Pervasive DataRush 的替代品有哪些

我们正在研究促进大规模并行数据处理的解决方案。我们的处理图通常相当复杂,因此像 Pervasive DataRush 提供的开发良好的算子框架就派上用场了。有谁知道 Pervasive 的任何替代解决方案?DataRush 是 Java,但我想考虑可以使用此类解决方案的所有平台和语言。

0 投票
1 回答
2413 浏览

visual-studio-2008 - 如何构建数据流?

我正在运行 Visual Studio 2008,SSIS 教程描述于:http: //msdn.microsoft.com/en-us/library/ms167106.aspx

我完成了所有任务,但出现以下错误:

错误 1 ​​验证错误。提取样本货币数据:提取样本货币数据:输入列“CurrencyAlternateKey”(123) 具有先前未在数据流任务中使用的沿袭 ID 55。第 1 课.dtsx 0 0
错误 2 验证错误。提取样本货币数据 SSIS.Pipeline:输入列“CurrencyAlternateKey”(123) 具有以前未在数据流任务中使用的沿袭 ID 55。第 1 课.dtsx 0 0

你能告诉我需要做什么才能使这个构建没有错误吗?