问题标签 [apache-pinot]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
0 回答
53 浏览

apache-zookeeper - Pinot - 无法启动 zookeeper

我正在启动 Pinot 组件,作为我尝试启动 Zookeeper 的第一步。

我正在运行命令来启动 zookeeper:

但是一段时间后我会变成这样:

我重新启动了在线规定的基于服务器的建议。甚至没有运气。

会话到期 0x1000014c3150007,超时 30000 毫秒超时 会话到期 0x1000014c3150009,超时 30000 毫秒

0 投票
0 回答
187 浏览

apache-kafka - HttpErrorStatusException:得到错误状态代码:400(错误请求),原因:“无法添加无效架构:myschema。原因:null”

我正在尝试创建架构,但出现错误,这是:

bin/pinot-admin.sh AddTable -tableConfigFile $PDATA_HOME table-config.json -schemaFile schema-config.json -controllerPort 9000 -exec 执行命令:AddTable -tableConfigFile table-config.json -schemaFile schema-config.json -controllerProtocol http -controllerHost 172.31.10.219 -controllerPort 9000 -exec 发送请求:http ://172.31.10.219:9000/schemas到控制器:localhost,版本:未知 上传 Pinot 模式时出现异常:myschema org.apache.pinot.common.exception。 HttpErrorStatusException:得到错误状态代码:400(错误请求),原因:“无法添加无效架构:myschema。原因:null”,同时发送请求: http: //172.31.10.219 :9000/schemas到控制器:localhost,版本:在 org.apache.pinot.common.utils.FileUploadDownloadClient.sendRequest(FileUploadDownloadClient.java:397) 处未知 ~[pinot-all-0.7.0-SNAPSHOT-jar-with-dependencies.jar:0.7 .0-SNAPSHOT-d87755899eccba3554e9cc39a1439d5ecb53aaac]

表配置:

和架构配置:

0 投票
0 回答
71 浏览

apache-kafka - kafka-console-producer -- 没有得到任何响应

我正在尝试推送到 Kafka,但我无法得到任何回应。并且数据也没有出现在消费者控制台中。我如何追踪它,在哪里可以找到日志?是否有任何选项可以添加到我的命令中以查看更详细的日志?

我正在运行这个命令:

我只得到这个输出:

0 投票
1 回答
92 浏览

apache-kafka - Kafka 和 Pinot——消息未发送

我正在尝试通过 kafka 和 json 文件输入数据并运行以下命令:

但我收到错误:

0 投票
1 回答
142 浏览

presto - 错误代码 PINOT_UNABLE_TO_FIND_BROKER :找不到有效的经纪人

我正在尝试使用 presto 查询 Pinot 表数据,以下是我的配置详细信息。

我在不同的服务器上有 Presto 端口在这 2 台服务器上都是开放的。即10.184.160.53

但是当我从测试中选择 * 时;未找到其展示经纪人

完整的 Presto 日志:

我无法理解这里发生了什么,为什么选择语句显示此问题。看起来比诺经纪人不接受查询。有人请建议,这里有什么问题。

0 投票
1 回答
292 浏览

apache-kafka - 如何使用 avro 模式从 kafka 主题向 apache Pinot 注入数据?

我已经开始探索 apache Pinot,关于 Apache Pinot架构的查询很少。我想了解 apache pinot 如何与具有 AVRO 架构的 Kafka 主题一起工作(架构包括嵌套对象、对象数组等),因为我没有找到任何资源或示例来展示我们如何使用具有 avro 的 Kafka 注入数据架构与它。

根据我对 apache pinot 的理解,我们必须为嵌套的 Json 对象提供平面模式或其他选项,我们可以使用转换函数。是否有任何类型的 Kafka 连接用于 Pinot 进行数据注入?

Avro 架构

卡夫卡 Avro 消息:

0 投票
1 回答
141 浏览

hadoop - 用户身份验证问题在 kerberos 中使用 keytab

我正在尝试将 Kerberos Hadoop 与 Pinot 集成,并使用以下配置。

可执行文件:

控制器配置文件

克贝斯信息:

错误信息:

Ps 我正在执行这个 hdfs 用户,对于 keytab 文件,用户也是 hdfs 。我也给了 777 访问 hdfs.keytab 文件的权限。

有人请建议这里的问题是什么。我已经阅读了多个块并且到处发现这是因为错误的 prinicpal/keytab 文件组合/用户无权访问/授予 777 访问文件/尝试使用不同的用户。尝试了所有选项,但到目前为止没有任何效果。

0 投票
0 回答
38 浏览

apache-spark - Pinot spark 摄取 glob 输入 uri 无法按预期工作

目标:使用pinot repo示例spark摄取作业将数据从hdfs推送到pinot,针对path/2014/01/02/xxx.avro的摄取数据

env:pinot 0.8 使用 java1.8 构建

我做了什么:在 sparkIngestionJobSpec_1.yaml 中,我尝试了下面的输入,发现它没有按预期工作。

0 投票
0 回答
15 浏览

apache-pinot - Apache Pinot - 尝试通过终端添加模式

尝试通过终端添加架构,显示以下问题。

./pinot-admin.sh AddSchema -schemaFile ../examples/batch/baseballStats/baseballStats_schema.json -exec

在此处输入图像描述