问题标签 [bulk-import]

我正在使用此代码将数据从 Excel 选项卡表导入 SQL Server。

在一个 Excel 选项卡中，我们有100,000条记录，但代码只导入了大约49,000条记录。

在第二个选项卡中，我们有大约50,000条记录，但代码只导入了大约23,000条记录。

没有错误发生，它只是移动到下一个选项卡导入，因为我们有大约 18 个 Excel 选项卡表要导入。

有人有什么主意吗？是什么原因造成的，我的代码中可能存在什么问题？

感谢大家阅读帖子。

所以我有一个新娘精品店客户，我正在为其开设 Shopify 商店，他们想要进口大约 800 件舞会礼服。我遇到的问题是，我总共有大约 7 位设计师，每个人要么给出了包含样式、价格、颜色和材料的 PDF 价格表，要么给出了格式不同的 Excel 电子表格。

我知道 Shopify 具有 CSV 导入功能，但是必须复制和粘贴 800 多件衣服，每件衣服都有特定的颜色、款式和不同的价格，这似乎是一项非常乏味和耗时的任务。必须有一种更简单的方法，就好像不使用 CSV 表一个一个地添加这些产品几乎“更容易”。

关于什么最简单的任何想法？真的可以在这件上使用一些帮助，而不是花几天时间一件一件地进口每件衣服。

谢谢！

我在 WSO2 API 管理器中导入了批量用户，但所有用户的密码都在 24 小时内过期。几天后，我不得不系统地更改每个用户的密码。我怎样才能避免这种情况？有没有办法改变过期时间？

我有 .csv 文件要导入到表中。我正在使用 SQL Server 2017，但这里我的问题是我拥有的数据如下：

当我使用字段终止符作为逗号（，）时，从 column1 值划分为不同的列值，因为字段终止符是（，）。我在这里看到的是，双引号中的值应该从字段终止符中转义。

我有一个哈希数组（大约 20k），我需要导入但需要验证，并且还必须使用 paper_trail 创建版本。

arr = [{some_1_id: '1', some_2_id: '2', some_3_id: '3', amount: '123'}, {some_1_id: '1', some_2_id: '2', some_3_id: '3', amount: '123'}]

我有一个这样的哈希数组。在此，我们可以预期大约 20k 元素需要保存到 DB。

我使用了 activerecord-import，但它绕过了所有回调，包括 paper_trail 回调。

我试图像这样运行回调

但它没有正确保存 paper_trail 版本。

我所做的是

它按预期工作，但性能一点也不好。10k 条记录需要 30 多秒。

提前致谢。

我正在尝试将带有元数据的 xml 文件导入到存储库中的 pdf 文件中

目标文件：test.pdf

xml文件：test.pdf.metadata.properties.xml

当我尝试导入 xml 时，出现以下错误：

任何想法都是有帮助的。谢谢！

正如 MSDN for bulk import中提到的，我尝试使用 UNC 路径来导入数据，但它失败了。

它失败并出现错误：

无法批量加载，因为无法打开文件“\FS1-CBR.strange.ibm.au{fu-spec}\work\Proj1 Vis-NIR_all\New South Wales\file1.asd”。操作系统错误代码 5（拒绝访问。）。

我猜它是由于UNC 路径中的子字符串{fu-spec}而失败的。我可以通过文件资源管理器以及以编程方式访问该文件，因为我拥有该位置的权限。

在这种情况下，如何在 SQL Server 中使用OPENROWSET BULK导入文件？

我正在尝试将.CSV文件导入我的 SQL Server 数据库。这是我正在使用的脚本：

问题是我的 CSV 中有如下行。

请注意第""GXXXXX"5 列中的内容。

导入到该行时停止并出现以下错误

由于 CSV 数据文件中的列值无效，批量加载失败

有没有办法让导入器像我们可以使用MAXERRORS属性一样忽略数据格式错误？

我喜欢从xlsx或csv向我的原始用户模型批量导入用户。我不使用AbstractUserorAbstractBaseUser我不喜欢，因为我的网站正在运行并且我不想滥用我的架构。

我正在使用添加用户的原始用户模型（不允许用户注册），并将额外的字段与OneToOne关系存储在我的个人资料模型中。

我没有那么有经验，所以我尝试使用我找到的代码片段，但我仍然无法实现我的目标。如果我尝试import-export在我的管理面板中使用模块，它适用于其他模型，但不适用于 User 模型。Tablib或其他解决方案对我来说也很有趣。

models.py （我使用的是原始用户模型，该模型在创建用户时向 Profile 模型发送信号）

表格.py

管理员.py

我收到此错误消息：

我知道我的用户模型正在使用中，但我该怎么办？