问题标签 [fiware-cosmos]

我正在尝试在 SpagoBI Server v5.1.0 上部署来自 SpagoBIStudio 5.2.0 的报告。

该报告在 SpagoBIStudio（我的计算机本地）中完美运行，并且我使用 SpagoBI Server 的 Web 界面成功创建了数据源和数据集。
然而，当我单击“.rptdesign”文件的“部署”选项时，我看到以下对话框并且“完成”按钮始终处于禁用状态。

出于某种原因，我可以选择正确Datasource的，但Dataset下拉列表为空且已禁用。我想这可能是问题所在。
数据源是与 Cosmos 的 JDBC-Hive 连接，数据集在 Studio 和 Server 中都定义为 HQL 查询。

有人知道为什么 SpagoBIStudio 的部署文档向导中没有列出数据集吗？

提前致谢。

我正在关注Hadoop/FIWARE-Cosmos 上的本指南，并且我对 Hive 部分有疑问。

我可以通过 SSH 访问旧集群的 ( cosmos.lab.fiware.org) 头节点，但我无法为新集群执行此操作。我都试过了storage.cosmos.lab.fiware.org，都computing.cosmos.lab.fiware.org连接不上。

我尝试通过 SSH 连接的目的是通过 Hive CLI 测试对我们数据的 Hive 查询。失败后，我检查并能够连接到computing.cosmos.lab.fiware.orgtelnet 的 10000 端口。我猜 Hive 是通过该端口提供服务的。这是我们可以在新集群中使用 Hive 的唯一方法吗？

我有一些关于 fiware-cosmos 的一般性问题，如果它们是基本的，我很抱歉，但我试图了解 cosmos 的架构和使用。

我看到您打算将 Apache Spark 集成到 Cosmos 中？你有路线图或日期吗？如果我现在想使用 Spark 会怎样？

可以使用哪些 Hadoop 服务源？我想我读到 Cosmos 支持 Cloudera CDH 服务和原始 Hadoop 服务器服务？HortonWorks 或 MapR 呢？

我知道非标准文件系统可以与 Hadoop 一起使用，例如 MapR-FS，这样的选项可以与 Cosmos 一起使用吗？

我还读到 Cosmos “位于”固件之上，因此可以使用 Hadoop 即服务 (HaaS) 并使用开放堆栈生成 Hadoop 集群？但是，我看到人们指的是共享固件云？fiware 是否作为远程云运行？可以在客户站点上使用本地云吗？

cosmos 是 fiware.org 上唯一的 Apache Hadoop/Spark 解决方案吗？

最后，如果 Cloudera CDH 可以与 Cosmos 一起使用，Cloudera 集群管理器如何融入其中？还能用吗？

对不起所有的问题:)

我创建了自己的 Mapreduce jar 文件，并使用 HDFS shell 命令成功地在 Cosmos 的旧 Hadoop 集群中进行了测试。下一步是在新集群中测试同一个 jar，所以我将它上传到 新集群的 HDFS中，到我的主文件夹 (user/my.username)。

当我尝试使用下面的 curl 帖子开始 Mapreduce 作业时，

我得到：

{“成功”：“假”，“错误”：255}

我为 jar 尝试了不同的路径值，得到了相同的结果。我是否必须将我的 jar 上传到其他地方，或者我错过了一些必要的步骤？

我无法通过 hive 连接到 PHP 中的 cosmos 服务器：

我尝试使用其他服务器，如 storage.cosmos.lab.fiware.org 和 Computing.cosmos.lab.fiware.org。如果我设置了很长的超时时间，那么脚本将永远等待。

你能帮我用php连接到cosmos的hive服务器吗？

据我们所知，FIWARE 实验室 (cosmos.lab.fiware.org) 中的每个 Cosmos 用户在 HDFS 中最多有 5GB 可用空间。尽管如此，尽管作业生成的数据不超过 5GB 配额，但在运行我们的 map-reduce Hadoop 作业时
我们还是会遇到问题。DSQuotaExceededException

如果我们在执行 map-reduce 作业期间监控 HDFS 的使用情况，我们会得到以下输出：

一段时间后，执行结束并出现以下异常：

正如您在上面日志末尾所看到的，最大 HDFS 使用量对应于 1.722.549.413 字节和 201.060.881 字节的免费配额（根据hadoop fs -count -q），这不包括 5GB 的可用用户空间。
此外，占用的空间与剩余的可用空间不匹配。

剩余配额空间如何计算？
有什么办法可以避免DSQuotaExceededException？

提前致谢。

我正在尝试使用以下 Python 代码将 Hive 查询发送到 Fiware Cosmos：

但我收到以下错误：

两个月前，我可以使用相同的代码进行连接。有什么改变或解决方案吗？

提前致谢。

根据我的阅读，FIWARE COSMOS 使用 HDP 2.5 的必备工具是：

• COSMOS（用于共享 Hadoop 的 HAAS 引擎，例如使用 HDP 2.2 测试）
• 基于 HDPF 的存储集群（使用 HDP 2.2 测试）
• Cosmos GUI 安装和配置& GitHub

问题：

• FIWARE 团队能否分享有关如何将 Cosmos GUI 安装和配置到 HDP 2.2 或 2.5（使用 HortonWorks Sandbox 安装）的说明

• 请提供使用 HDP 2.2 的轻量版 Cosmos 大数据架构。

• 我不确定 HDP（2.2 或 2.5）是否带有 HttpFS 服务器？

参考：大数据分析 - 安装和管理指南

几个月以来，作为 FIWARE Cosmos 的一部分，可以使用 Sinfonier/Storm 安装。我想，同样有一种方法可以在 Hadoop 后端传递和处理 NGSI 数据，在 Sinfonier/Storm 中应该有一种方法。不幸的是，文档对此没有帮助。

在哪里可以找到使用 FIWARE Sinfornier 分析 NGSI 数据的示例？

谢谢！

PS：文档建议使用标签“fiware-sinfonier”，但它还不可用，我无法创建它。

如果我将文档的 TTL（生存时间）属性设置为 -1，我想知道 Azure Cosmos DB 更改源将更改的数据保留多长时间