问题标签 [bulk-import]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
9523 浏览

csv - SQL Server 批量导入格式文件 - 在数据文件中遇到意外的文件结尾

我正在测试从逗号分隔的 csv 文件到 sql server 2012 的批量导入。为此,我使用 BCP 实用程序创建了格式文件。

以下是 csv 文件中的单行

以下是我使用 BCP 实用程序生成的格式文件

这是SQL

知道我何时执行以下错误 accour 的 abve sql

我试过了ROWTERMINATOR = '\n',ROWTERMINATOR = '\r\n',ROWTERMINATOR = '0x0a',。错误是一样的

任何帮助

0 投票
1 回答
348 浏览

sql-server-2008 - 使用批量插入时,我在货币列中的值发生了变化

我有一张桌子,我可以在其中存储金额。当我曾经将这些值从我的那个表插入到另一个表时;价值观的变化。

在我的第一个表中,列“PRICE”的值为 130,但是当使用批量插入时,它在另一个表中插入为 129.60。

我的批量插入命令是:

0 投票
1 回答
1917 浏览

sql-server - BCP数据导入,无效时间格式错误

我无法将文本文件的数据加载到我的数据库表中,并出现持续错误

无效的时间格式。

我已更改时间格式以在日期和时间之间包含一个 T,但无济于事。我还替换了年、月、日分隔符。到 - 但错误仍然存​​在。

这就是我尝试从 txt 文件加载的方式

然后我继续确认字段的数据类型,前缀长度(这是字段之前的分隔符的长度......对吗?)和字段终止符。我创建了一个格式文件,使用时仍然会产生相同的错误。我正在导入的日期时间字段是典型行中的其他四个字段之一。

我错过了什么?

编辑

这是一个典型的行

我在使用 SSIS 时也失败了,我之前的第一次使用访问的工作在这里不适用。它是 bcp 或 SSIS

0 投票
1 回答
429 浏览

sql - 如何使用 SSIS 从具有动态列的 excel 导入数据?

首先,我很抱歉提出这样的问题。我是 SSIS 的初学者。我刚刚创建了一些示例,并且正在尝试将我在 .net 中开发的工具之一更改为 SSIS。我的场景是我的文档有一个包含自定义属性的表格。这些属性由用户根据他们的要求创建。(通用属性将存储在单独的表中。当前的问题是自定义属性。)

例如。

当用户添加区域等自定义属性时,我的服务代码将在自定义属性表中添加一列。这样表就会变大。如何将数据从 excel 迁移到此表。在 ssis 我需要映射列。有没有办法用动态列数创建这个逻辑。

样本数据

项目名称无地区电话邮箱

名称项目无位置联系人无兴趣技能1技能2技能3

这里 Name 和 projectNo 将存储在一个表中。这是一个直接的逻辑。但我的问题是表中存储的其余列是不同的。

它像是

ObjectId 道具 1 道具 2 道具 3 道具 4

每个道具字段将保存在主表中。

PropId PropName 数据类型长度

期待你的答复。

0 投票
0 回答
36 浏览

csv - 需要通过 CSV 批量处理未选中的产品类别

我如何批量未检查的产品类别,错误进口的产品有 100 种产品的错误类别。我怎样才能不被csv选中。

0 投票
1 回答
104 浏览

powershell - 从 csv 文件批量导入 Active Directory

我正在尝试使用以下代码将 Active Directory 中的批量导入到所有客户OU 中。

CSV 文件包含姓氏、名字、地址、城镇、邮政编码、电话、电子邮件标题。我收到许多错误,看不出代码有什么问题。

0 投票
1 回答
117 浏览

python - Python,aws s3 - 带有图像批量导入的数据

我是stackoverflow的新手。

我对批量导入数据的过程有疑问。

场景:我们的 XYZ 系统具有批量导入数据的功能,但我们在如何通过 SFTP 将图像批量导入到 aws S3 时遇到了麻烦。请注意,这些图像与通过批量导入导入的数据相关。

希望听到任何对此有知识的人的回复。谢谢。

干杯!

0 投票
1 回答
1705 浏览

python - 在python中的elasticsearch中批量插入时出现连接错误

我已经编写了将 json 导入到 elasticsearch 的代码,但我的连接错误为'Connection aborted.',error(104, 'Connection reset by peer'

代码是

错误是

谁能帮我吗 ?

0 投票
2 回答
137 浏览

sql-server - 使用 BCP/BULK IMPORT (SQL Server) 导入不存在的行

我正在尝试将文件加载到 SQL Server 数据库中。我熟悉使用批量导入和使用 BCP 生成格式文件来重组列。但是,我正在尝试做两件我以前从未尝试过的新事情。

我已经获得了许多单独的 CSV 文件来加载到数据库中,每个文件都代表几年中的一天。我希望能够使用实用程序来加载它们,但它们有不同数量的列(当然,是单独的文件!)。我正在考虑创建一个加载存储过程,并使用 PowerShell 对文件进行迭代,但即便如此,我也无法想出一个好方法来处理不同数量的列。

这些列是一致的,只是这些文件多年来已经添加了列。我希望能够导入具有较少列的文件,让不存在的列作为空值进入。BCP 支持吗?

我宁愿不必弄清楚何时添加每列并为每组日期编写不同的存储过程/脚本(这是我能想出的唯一解决方案!)。有什么建议么?

谢谢!

0 投票
1 回答
80 浏览

sql - 如何将 Azure blob 文件导入 Sql Server 2008

除了使用 CLR 之外,还有其他方法可以将 Blob 文件导入 sql server 2008 吗?

文件大小约为 300MB,因此 CLR 不够高效。有没有可能使用BULK INSERTOPENROWSET在2008服务器?

Sql Server 2017 中的示例我们可以这样做

然后我们可以在批量导入中使用外部数据源

那么我们是否有类似上面的东西可以在 Sql Server 2008 中导入 blob 文件?