问题标签 [data-import]

我一直在尝试使用 .dat 和 .sps 文件将数据导入 R。.dat 文件没有标题和不同长度的列，这些列当然包含在 .sps 文件中。它还包含缺失值。我尝试使用spss.fixed.filefrom package memisc但是当我将其指定为：

我收到以下错误：

spss.parse.variable.labels(varlab.file) 中的错误：“变量标签”语句过多

以前有人用过这个命令/包吗？鉴于所有这些信息都包含在同一个 .sps 文件中，我无法理解 column.file 和 varla.file 是否可以作为同一个文件。任何帮助将不胜感激！

在 GAE 中使用 Python 构建一个应用程序来处理大量用户数据，例如联系人、约会等...

希望允许用户从其他应用程序导入他们的旧数据。例如，约会可能如下所示：

我不熟悉处理此类情况的公认做法。我还看到在谷歌应用引擎上处理这个问题，因为请求不能超过 30 秒。

理想情况下，用户似乎应该能够通过网页上传其数据的 CSV 文件，但我真的不知道使用应用引擎执行此操作的好方法。

我能想到的另一种方法是让用户将文本直接剪切并粘贴到 HTML 文本区域中。然后 javascript 可用于迭代数据并将其一次一行或以小块形式发布到服务器。不过，这对我来说听起来很粗略。

关于处理这个问题的“好”方法有什么想法吗？

非常感谢！

我需要将一些 CSV 导入 Excel 电子表格，每个 CSV 的行/列号都不同。问题是某些值是长数字字符串
341235387313289173719237217391， 例如

Excel 会将这些值视为（双）数字，然后导致数据丢失。

我解决它的方法是使用以下vba函数来完成这项工作：

问题是性能。它比通过 Data->From Text 导入数据或直接打开 CSV 慢得多。

有什么方法可以更有效地做到这一点吗？

I have a small issue with using bcp import tool. This is the case I have a .csv data file (field separator if | character) and format file. I can import data into the table successfully, but it is importing NULL value instead of empty strings in data file. consider below as sample record in data file

I got output like below

but I am expecting below output

in my table definition, default values are empty string, is this due to an issue with data file (bcp data exporting command) or my data importing bcp command.

this is the command I used to import data bcp [database].[table] in M:\data\xx.csv -f M:\format\XX.FMT -S serverName -T

Thanks and All reply are welcome.

从BigQuery的导入文档中，

注意：不允许空值

所以我假设null在 json 格式的数据中不允许 BigQuery 导入。但是，null值实际上在常规 ETL 任务中很常见（由于缺少数据）。导入此类 json 源文件应该是什么好的解决方案？请注意，我的数据包含嵌套结构，因此我不喜欢转换为CSV和使用,,来表示一个null值。

我认为我可以做的一种方法是null分别用不同数据类型的默认值替换所有值，例如，

• 字符串：null-> 空字符串
• 整数：null-> -1
• 浮动：null-> -1.0
• ...

但我不喜欢它。我正在寻找更好的选择。

顺便说一句，我尝试bq load使用包含null值的 json 文件。我收到以下错误：

我认为这是null使用的指示，对吗？

编辑：如果我删除所有null字段，它似乎工作。我想这是处理null数据的方式。你不能拥有null一个数据字段，但你不能包括它。所以我需要一个过滤代码来删除null我的原始 json 中的所有字段。

我有一个 rake 任务设置，它使用 iCalendar gem从iCal 文件中导入事件。除标准 .ics 字段外，iCal 还包含几个自定义字段。是否也可以导入这些值？

iCal 文件中这样的行我可以毫无问题地处理：

像这样的行会出现问题：

我将如何引用自定义“事件位置”字段？

这是我到目前为止的代码：

我的数据文件： votes.txt 由与以下内容相同的行组成：

每个条目用空格分隔。我目前有 19 行的样本。

领域：

没有用于此练习。

对于 foreach 的每个循环，$campaign 和 $choice 变量都通过 switch 语句运行，以定义候选 ID 和活动 ID 数字。这些外键将分别映射到候选人和竞选表。

有关数据库模型，请参见：http ://acookson.org/wp-content/themes/cookie_23112012/img/sms_voting.png。

IE

在 votes.txt 中检测到的任何空值都会导致 $errors 变量增加。

该脚本似乎成功循环通过 votes.txt 但未能初始化：$campaign_id 和 $candidate_id 变量。完成后，errors=19 被打印到终端；我的样本数据 votes.txt 中的总行数；这意味着该文件中的每一行都未能插入到数据库中。

证实了这一点。

该脚本没有报告语法错误；因此它的级别更低。没有开关就可以正常工作；因此，这在一定程度上缩小了范围。但是我看不到开关的问题，所以在这里寻求建议。

我正在尝试使用 OleDb 从 datagridview 将 Excel 工作表插入 SQL Server 数据库。

我使用的代码：

我的数据库名称是：mohammed表名test有两列firstname，lastnameExcel工作表的列是fname和lname..

问题是，当我执行代码并在单击 button1 时从 button2 插入 Excel 工作表后出现窗口错误

vshot32-clr2.exe 已停止工作

请问有什么帮助吗？？

我尝试导入一个（巨大的）csv文件，在第一列中包含一个hotel_id，我希望sql表中的数据类型是这个代码的整数；

但这不起作用（我得到一个无效的数据类型错误），有什么想法吗？

CSV 文件的格式如下；

我得到的警告是；

更新：我发现实际导入的 varchar 字段在每个字符之间包含一个 nul 值，所以这可能是问题所在（？）（查看二进制中的值，每个字符之间都有一个 00 字段，因为它是文本aNULbNULcNUL 我怎样才能避免这种情况？

我将所有 XML 文件都存储在另一台服务器上，并且我已经在不同的服务器上安装和配置了 SOLR。如何将这些 XML 文件索引到 SOLR。我已经检查过 nutch，但它的主要目的是抓取 html 页面并将它们编入索引。我不需要爬行。我在其他服务器上的特定路径上有所有这些文件。我只需要在 SOLR 中索引这些 XML 文件。我已经安装并配置了 SOLR4。

如果有人做过这样的事情，请告诉我该怎么做。谢谢