问题标签 [data-import]

我有 100 张 Excel 财务报表表来提取选定的数据。例如，第一张表来自 A 公司，其“总资产”项目在 A10 中，但在第二张表中，“总资产”项目在 A17 中，第三张在 A12 中......

因此，每个财务报表的项目在其 Excel 表中都有不同的位置。有什么办法可以通过指定他们的名字来提取它们，例如“总资产”、“其他收入资产”等，然后我就不需要一一阅读它们的位置了。

我正在尝试从文件中恢复 postgres sql 数据。我正在尝试这样做，但它没有导入 .

这是我正在使用的命令：

postgres-# psql -hlocalhost -p5432 -u postgres -d test -f C:/wamp/www/test/database_backups/backup004.sql

请帮助我做错了什么。我正在使用 Windows，上面的命令不会引发任何错误，但不会导入数据。

问候苏尔扬

我有一个带有表转储数据的 csv 文件，我想使用 rails 将它直接导入我的数据库。

我目前有这个代码：

在这里的帮助下..

考虑我的示例 csv：

但是这段代码的问题是：

• 它生成 'id' 作为自动增量 1,2,3,.. 而不是 csv 文件中的内容。
• 记录的时间戳0000-00-00 00:00:00自动默认为 null 并引发错误，因为 created_at 列不能为 null ...

有什么方法可以以通用方式从 csv 导入模型？还是我必须为每个模型编写自定义代码来手动操作每一行中的属性？

需要在sql表中移植数据

我有一个带有列 ( masterid, masterdata, year) 的主表。这masterid是一个身份列。

我有 2012 年的数据。我需要与 2013 年相同的 2012 年数据

我可以通过简单地运行如下 SQL 语句来解决问题：

我也想为子表运行类似的运行。

我的子表结构是：（childid , masterid, childdata）

这里我有 2012 年的子数据，我想masterid在第一步中为 2013 年的主数据正确创建 2013 年的类似数据。

最好我想在不添加额外临时列的情况下获得解决方案

任何铅都非常感谢。

问候，库马尔。

我在为数据导入编写一些 SQL 语句时遇到错误。

在做数据端口时，我需要声明一些临时表变量。

我在文件的开头声明了一个表变量，并对表变量执行了一些操作（while 循环、插入和更新）。稍后在另一个 while 循环中的脚本中间，如果我访问此表变量，则脚本解析给出以下错误

必须声明表变量@temptable

感谢你的帮助。

这是我要导入的表：

) 引擎 = InnoDB 默认字符集 = utf8;

CSV 开头为：

• Nume,Prenume,Tip,Specialitate
• Bunica,Mihai-Daniel,primar,reumatologie
• Donca，Cornelia-Ana，primar，chirurgie
• Achiriloaie，Lorand-Levente，专家，神经病学

我写的代码是：

将文件 'D:/xxxxxxxxxxxxx/xxxxxxx/xxxxxxxxxx/xxxxxx/xxxxxxxxxx/medici.txt' 中的数据加载到表 Medici 字符集 utf8 字段中以 ',' 开头的行以 'Nume,Prenume,Tip,Specialitate\n' 结尾\n' (m_nume,m_prenume,Statut,Specialitate);

注意：我用 \n、\r、\r\n 更改终止，但我仍然得到 1 行。即使删除了终止的行，它也不起作用。

注意：我粘贴得很快，有点搞砸了，那里有 4 行。而且我认为它的格式正确的csv

等不及建议了，在此先感谢。

更多代码在这里：Nume,Prenume,Tip,Specialitate Bunica,Mihai-Daniel,primar,reumatologie Donca,Cornelia-Ana,primar,chirurgie Achiriloaie,Lorand-Levente,specialist,neurologie Papuc,Raducu-Liviu,primar,homeopatie Cucuiu ,Nutu,primar,ortopedie Buia,Tache,专家,ginecologie Dragomanu,Mitrut,专家,ecografie Ticu,Simona,专家,psihiatrie Ene,Adrian-Stefan,专家,pediatrie Copae,Toma,primar,neurologie Hotoi,Dragos Alin,专家,儿科 Ceafalau,Vincenţiu Mihail,primar,儿科 Briceag,Anca Stefana,primar,imagistica Condrea,Nutu,primar,fizioterapie Cruceru,Ioana-Loredana,primar,皮肤科 Soarece,Dan-Cristian,primar,orl Tatasel,Alexandru-Ovidiu,专家, psihologie Sterian,Gologaneanu,primar,chirurgie Postelnicu,Habib,primar,chirurgie Silviu,Adrian Ionut,primar,dermatologie Paius,Ioana,专家,ortopedie Borza,Marius Florian,专家,fizioterapie Tamas,Ciprian Costel,primar,chirurgie Ograzeanu,Cristina Alexandra,primar,endocrinologie Rildo,Alex,专家,ecografie

在 csv 中，这些行被合并（一行到另一行）例如：在 reumatologie 它以名称开头但是当我粘贴代码时，您可以看到它实际上是一个 \n Bunica,Mihai-Daniel,primar,reumatologieDonca,(.. ..这是第二行，依此类推）

我使用许多表进行索引。这些表也被爬虫用于在数据导入期间插入、更新。

在数据导入期间，我收到一些表的错误，例如“无法执行查询”。但是下一次，当我尝试为该表导入数据时，我可以成功完成而不会出现任何错误。

我在 data-config.xml 中设置了 connettimeout、readtimeout，但我经常收到此错误。如果我使用其他进程（插入、更新、删除）使用的数据导入表，我会收到这样的错误吗？如何索引我的所有表？

我正在将 CSV 文件中的数据导入到 postgreSQL 表中。

该表如下所示：

在批量复制之前，我使用删除主键ALTER TABLE DROP CONSTRAINT PRIMARY KEY

这是我COPY在 psql CLI 调用命令时的 CL 跟踪：

以下是输入 CSV 文件的前几行：

输入文件中的数据列与表模式中的顺序相同。谁能解释为什么我收到错误消息？

PS：我在 Ubuntu 10.0.4 LTS 上使用 PostgreSQL 8.4

我们必须将大量数据从 Web 服务、平面文件和其他外部来源导入生产数据库。我们正在使用 Spring Batch 来执行此操作。

主要问题之一是其中一些数据相互关联，但不会同时导入。另一个主要问题是数据量很大，所以我不能真正做一个巨大的事务，如果出现问题就回滚。

我怎么能那样做？

我有一个mysql db，数据表是按照分片规则命名的，也就是说名字有相同的前缀，例如：the_table_，并且后缀有一个数字，所以表名会是the_table_1,the_table_2,the_table_3。当我们要选择一行，我们要从sql select mod(primary_key_id, 64)+1中找到表后缀，分片规则，64是一个基数，也就是说我们有64个表。

现在我们想使用Solr来索引表中的数据，但是solr data-config.xml不支持动态名称的sql查询，那么有什么解决这个问题的建议吗？

诸如此类的事情？