问题标签 [data-importer]

我们正计划构建一个动态数据导入工具。基本上以指定格式（access、excel、csv）在一端获取信息并将其上传到网络服务中。

情况是我们不知道导出字段名称，因此应用程序需要能够看到 wsdl 定义并映射到另一端的有效条目。

在导入部分，我们可以定义大部分字段，但通常它们有一些是自定义的。我认为这没有问题。

我只是想知道是否有适合这种类型的应用程序或有助于开发它的设计模式。

http://our.fogbugz.com/default.asp?W977

我怀疑这将是一项简单的任务，但只是想在尝试之前先问一下。

如果你用过，效果如何？有什么注意事项或有帮助的事情吗？可以自动撤消更改吗？

你会做不同的事情或事先在 trac 中进行配置以使其更容易吗？

顺便说一句：我对fogbugz 的初始试用感到满意，trac 没有问题，但我真的想要一个自动回复器和一种发送电子邮件至 support@mycompany.com 的方式来创建新票证并回复。简直太专业了。

对项目估算感到好奇，但这不是一个因素。我期待着尝试。

我很想知道是否有人有使用Abinitio进行数据导入、操作、导出的实际经验，以及你是否强烈推荐它。

我希望解决这个过程的可扩展性问题，如果它解决了这些问题，我希望得到一些反馈。

我听说这是一个很好的工具。

我需要解析一堆分隔的平面文件并将它们导入数据库。我可以构建自己的简单元数据驱动的解析器和导入器，但我认为肯定已经有类似的东西了？

谢谢，戴夫。

在部署应用程序时，我经常使用 Hibernate 的能力来创建数据库模式，以简化部署。这很容易通过配置 hibernate.hbm2ddl.auto 属性来实现。

但是，有时我还需要向数据库中插入一些初始数据，例如 root 用户。有没有办法通过休眠和某种加载文本文件来实现这一点？

我知道我可以很容易地编写代码来实现这一点，但只是想知道是否已经有一些实用程序可以帮助我通过配置实现相同的目标？

我有一些表（大约 200 个）要迁移并包含在 Sharepoint 列表中。我需要一个自动过程，有人有工具或代码来生成基于表的共享点列表吗？

或者请提供一些链接以帮助我满足我的需求。

我需要从 excel 文件和带有图像的文件夹中导入一些数据，excel 中的每一行都描述了每个条目，并在文件夹中有一个文件名列表（与条目相关的照片）。

我已经完成了一个脚本，它在数据库中创建每个条目并通过 django shell 保存它，但我不知道如何实例化 InMemoryUploadedFile 以将其与模型一起保存。

在 django 1.0 中，我有一个小班，让我可以做我需要的事情，但是随着 django 1.1 的变化，它不再起作用了。

我正在使用这个类和这段代码来加载图像并将它们与模型实例一起保存。

问题是，如何从 python 中的文件创建 InMemoryUploadedFile 或 TemporaryUploadedFile？，或任何其他可以在这种情况下工作的东西。

我有一个脚本可以扫描电子邮件收件箱中的特定电子邮件。该部分运行良好，我能够获取我感兴趣的数据。我现在想获取该数据并将其添加到 Django 应用程序中，该应用程序将用于显示信息。

我可以在 CRON 作业上运行脚本以定期获取新信息，但是如何将这些数据输入 Django 应用程序？

Django 服务器在 Apache / FastCGI 下的 Linux 机器上运行，如果这有所不同的话。

[编辑] - 回应斯里卡的问题When you are saying " get that data into the Django app" what exactly do you mean?......

Django 应用程序将负责以方便的形式存储数据，以便随后可以通过一系列视图显示。因此，该应用程序将包含一个具有合适成员的模型来存储传入数据。我只是不确定您如何连接到 Django 以创建这些模型对象的新实例并告诉 Django 存储它们。

我是 SOLR 的新手，我对数据导入器的请求有疑问。

在我的data-config.xml，我有这样的东西

但是，每次我执行 delta-import ( /dataimport?command=delta-import) 时，它总是给我这样的异常：

我认为存在此错误是因为系统无法识别${dataimporter.request.dataView}，但我不知道如何使其识别？

我正在尝试制作一个 ftp 导入器，它几乎完成了，但为了进一步优化它，我想看看请求的文件是否已在服务器中更新。如果它已经存在并且没有被修改，我不会再次获取它。什么是最好的方法。请帮忙