1

我已将 .xls 文件作为数据集资源上传到我的 ckan 实例,并且下载完整内容没有问题。

问题是在预览表中只显示了前 1500 行(文件包含 23 000 行)。从 ckan 数据存储 API 获取记录时也会出现同样的问题。

以下请求返回前 1500 条记录(如预期的那样):

{domain url}/api/3/action/datastore_search?limit=1500&resource_id=413f4b95-a49c-4ae2-a6e2-1c9a8d2ab984

但是当我尝试查找接下来的 1500 条记录时,没有返回任何记录!

{domain url}/api/3/action/datastore_search?offset=1500&limit=1500&resource_id=413f4b95-a49c-4ae2-a6e2-1c9a8d2ab984

我的问题:可以上传到数据存储区的记录数量是否有限制?我在 ckan.org、官方文档 ( http://docs.ckan.org/en/latest/ ) 或邮件列表 ( https://lists.okfn.org/mailman/listinfo )上没有找到这方面的信息/ckan-dev )。有什么可以做的配置吗?

我有一个 CKAN 2.1 安装。

4

1 回答 1

0

我认为数据存储记录没有任何限制。我们在inventory.data.gov上成功上传了超过400万条记录

在这里查看,预览可能需要更长的时间才能加载

https://inventory.data.gov/dataset/national-center-for-education-statistics-nces-integrated-postsecondary-education-data-system-ipeds-a/resource/6d2a0324-5964-44c3-97be-061c0eb5fcc9

https://inventory.data.gov/dataset/veterans-burial-sites-1404404968/resource/53a0824d-2236-4c22-9dc8-9ac59b05285d

话虽如此,我们确实注意到了您提到的行为......我想这很可能是由于上传过程中发生的一些错误。您可以在编辑资源页面的数据存储选项卡下查看确切的详细信息。

于 2014-07-17T15:31:51.450 回答