问题标签 [data-import]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
0 回答
160 浏览

matlab - matlab 串行/fgets 不适用于非 ascii 字符

执行脚本:

并输入数据'ñ\n'(hexa C3 B1 0A),fgets挂起和超时,即不识别LF。这仅在输入扩展的非 ascii 字符串时发生。我正在使用 Matlab 7.12 R2011a

0 投票
4 回答
11163 浏览

solr - 如何在 SOLR 中索引 .html 文件

我要做索引的文件存储在服务器上(我不需要爬)。/path/to/files/ 示例 HTML 文件是

我在 solrconfing.xml 文件中添加了请求处理程序。

我的 data-config.xml 看起来像这样

我保留了默认的 schema.xml 文件并将以下代码添加到 schema.xml 文件中。

当我在设置后尝试进行完全导入时,它显示所有 html 文件都已获取。但是当我在 SOLR 中搜索时,它没有显示任何结果。任何人都知道可能是什么原因?

我的理解是所有文件都正确提取但未在 SOLR 中编制索引。有谁知道如何在 SOLR 中索引 HTML 文件的元标记和内容?

您的回复将不胜感激。

0 投票
4 回答
17193 浏览

sql-server - Importing data from MS Excel to SQL Server 2008 R2

I've a Microsoft Excel file with 25 columns and I used the data import wizard on SQL Server 2008 R2 studio to import it to already existing table. But, it only maps 14 columns and ignores the rest. Does it have a column number limit or there is a problem with my data?

0 投票
3 回答
2857 浏览

solr - 如何从 HTML 文件中提取元标记并在 SOLR 和 TIKA 中对其进行索引

我正在尝试提取 HTML 文件的元标记并将它们索引到具有 tika 集成的 solr 中。我无法使用 Tika 提取这些元标记,也无法在 solr 中显示。

我的 HTML 文件看起来像这样。

我的 data-config.xml 文件看起来像这样

在我的 schema.xml 文件中,我添加了以下字段。

在我的 solrconfing.xml 文件中,我添加了以下代码。

谁能知道如何从 HTML 文件中提取这些元标记并在 solr 和 Tika 中对它们进行索引?您的帮助将不胜感激。

0 投票
2 回答
29477 浏览

sql-server-2008 - 批量插入失败“批量加载数据转换错误(截断)”

我已经使用 SQL Server 的BULK INSERT任务完成了数百次数据导入,但这次我收到了一个不熟悉的错误,并且我尝试使用 Google 进行故障排除无济于事。以下是我使用逗号分隔文件的代码,其中新行由换行符指示:

它始终有效,但现在在一个带有日期和速率的简单文件上,它失败,错误为“ Msg 4863, Level 16, State 1, Line 1 Bulk load data conversion error (truncation) for row 1, column 2 (ColumnTwo )。” 当我查看文件时,我不明白为什么会失败(通常 Google 故障排除表明分隔符可能在一行中存在多次,这会引发此错误)。从文件中,这里是前十行(注意它在第一行失败):

我将这些数据插入到的表有两个字段 thaare VARCHAR(50),即使当我最初看到截断时,我将数据字段扩展为VARCHAR(2000)它并没有影响它。

我还尝试删除所有破折号,看看这是否搞砸了(即使我已经使用相同的代码使用破折号进行了大量数据导入,并且它可以正常工作),但它仍然收到相同的错误消息。

与 SSIS 一样,直接导入(通过Tasks)可以工作,但是这段代码失败了怎么办,因为它应该做完全相同的事情?

0 投票
1 回答
277 浏览

c# - 在数据导入策略上休眠事务范围

我们需要在数据库之间导入大量数据,涉及多个表。

交易的最佳策略是什么?我猜想打开一个会话,有一个大事务并在进程结束时提交它是一个坏主意。

在每张桌子之后提交会更好吗?如果一个特定的表对其他表有依赖关系,应该如何处理?

0 投票
1 回答
309 浏览

database-connection - Navicat、对象数据库和 Postgres

我在 Postgres 中通过 Navicat 导入向导(通过 ODBC 连接)导入表。从 Caché Intersystem DB 导入允许对象列表对象的表时出现问题。示例表测试

如何在不更改架构的情况下管理首选项列?Navicat 向导导入有一些功能吗?

0 投票
1 回答
731 浏览

utf-8 - Uploading UTF-8 strings into Vertica

I am trying to upload some UTF-8 strings into Vertica database using it's COPY command triggered by Vertica client (VSQL tool). Unfortunatelly, from Vertica docs:

The drivers do not transform data loaded by executing a COPY or COPY LOCAL statement.

Data I am importing looks like this

This is just a set of some characters and represents one string being imported. Does anyone has any idea how to do this? Of course, there is an option of some sed-awk magic before triggering COPY command, if needed.

0 投票
0 回答
95 浏览

mysql - 如何使用mysql命令将以下csv导入mysql?

如何使用 mysql 命令将以下 csv 导入 mysql 表?

问题是目标csv文件中有一个文本blob字段(名为“html”,其中包含多行文本),所以我不能使用'\n'作为记录分隔符,否则它会说“第 1 行不包含所有列的数据”。万分感谢 !!!

0 投票
1 回答
1436 浏览

solr - 增量导入期间日期/时间戳的其他替代方案

为了在 Solr 中执行增量更新,last_index_time(存储在 dataimport.properties 中)与数​​据库中的日期/时间戳列进行比较。

是否可以在 Solr 中进行配置,以便:

  • 我们使用数据库中的其他列(比如一个按顺序增加的“id”)而不是日期/时间戳?
  • last_index_id存储在 dataimport.properties 而不是 last_index_time ?
  • 在增量导入期间,我们可能会使用类似“where id > dataimporter.last_index_id”的条件?

提前致谢!