2

我正在尝试使用 SSIS 从 Sql server 2008 到 Netezza (Nps6) 进行增量加载。使用 Netezza 5.x 版 OLEDB 驱动程序。我正在使用Table or View - Fast Load带有Maximum insert commit size = 0.

在这里，我试图将数千条记录插入到 Netezza 表中。此目标表包含数百万条记录。此数据流任务需要几个小时才能完成。当我查看 Netezza 管理员活动查询时，我可以看到像下面这样的查询是问题所在，

SELECT * FROM Destination_Table;

下一步是外部表加载，如下所示，

insert into "destination_table"(col1, col2, col3)
select c0, c1, c2 from external '/dev/null' (c0, c1, c2) using ( 
    remotesource odbc' delimiter ' ' escapechar '\' ctrlchars 'yes' crinstring 'yes' timeroundnanos 'yes' encoding 'internal' maxerrors 1
) ;

谁能帮我理解为什么SELECT * FROM加载需要目标表。或者 Netezza OLEDB 驱动程序如何与 SSIS 配合使用。

感谢你的帮助。

4

2 回答 2

1

安装 OLEDB 6.x 版本后，不会出现此“SELECT * FROM DESTINATION TABLE”问题。我可以看到 OLEDB 6 版本的性能得到了很好的改进。但是，如果我们正在开发 OLEDB 5.x 版本，我相信最好先加载到阶段表，然后再加载到目标表

于 2013-06-10T05:44:41.087 回答
1

Table or View -fast load如果您未在 OLE DB 目标组件中选择数据访问模式选项，则无需查看包中的详细信息，就会发生您所解释的行为。快速加载选项将在内部使用 BULK INSERT 将数据上传到目标表中。

快速加载选项

使用的Table or view行为类似于 aSELECT *并拉出所有列。仅当您需要从源到目标的表或视图的所有列时，才应使用此访问模式。

您的问题是默认情况下此选项可能不会出现，因为您使用的是 Netezza。

请参阅此处讨论的问题以及可能的解决方法：

http://social.msdn.microsoft.com/Forums/en-US/sqlintegrationservices/thread/965b6d83-cf5e-405b-8784-7981e4386adc

此处提出的官方错误报告：

https://connect.microsoft.com/SQLServer/feedback/details/569087

于 2013-05-23T09:11:22.813 回答