问题标签 [hdp]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
3 回答
12826 浏览

debugging - 错误 1066:无法在 Pig 中打开别名的迭代器,通用解决方案

Apache Pig 中一个非常常见的错误消息是:

ERROR 1066:无法打开别名的迭代器

有几个问题提到了这个错误,但没有一个给出处理它的通用方法。因此这个问题:

收到 ERROR 1066: Unable to open iterator for alias 怎么办?

0 投票
1 回答
932 浏览

mapreduce - Ambari HDP 在提交 mapreduce 作业时为 mapreduce.tar.gz 抛出 FileNotFoundException

使用 Ambari 安装新的 Hadoop 集群后,我尝试提交 mapreduce 作业,但失败并抛出错误。

错误:

0 投票
1 回答
934 浏览

python - Python 程序以 Http 模式通过 Thrift 服务器连接到 HBase

我正在尝试编写一个简单的程序来通过以 Http 模式启动的 thrift 连接到 HBase 服务器。(集群是 kerberized )但我总是收到“读取零字节错误消息”

我参考了下面的链接,但这些示例仅在节俭服务器以二进制模式启动时才有效(??) https://github.com/joshelser/hbase-thrift1-python-sasl/blob/master/get_row.py

我做了 Klist 和 Kinit 一切看起来都很好,我也遵循了 HDP 文档,我的设置是正确的

https://community.hortonworks.com/articles/87655/start-and-test-hbase-thrift-server-in-a-kerberised.html

当我运行以下命令时,我能够列出表格

hbase org.apache.hadoop.hbase.thrift.HttpDoAsClient 主机 9090 hbase true

非常感谢任何对通过 thrift http 模式连接到 HBase 的示例代码的参考

谢谢你

0 投票
0 回答
37 浏览

hadoop - hawq 2.4 的 Hadoop 要求是什么

在 Centos 7.3 上使用 HAWQ 2.2 和 HDP 2.5.3。计划升级到新的 HAWQ 版本 2.4。HAWQ 2.4 的要求是什么?

0 投票
2 回答
207 浏览

hdfs - Pig 无法创建 .bz2 文件但创建 .deflate 文件

这是我用来读取、过滤和压缩 bzip2 中的数据的 pig 脚本,但我得到的是 .deflate 文件而不是 .bz2。

谢谢你的帮助..

0 投票
1 回答
373 浏览

apache-spark - 是否可以在 hadoop3 集群上运行 Spark (2.3) 作业,特别是 HDP 3.1 和 CDH6 (beta)

此外,CDH 6 处于 beta 阶段,他们是否支持 spark 2.3 没有任何花里胡哨的东西?是否可以在启用 hadoop 3 的 CDH 或 Hadoop 集群上运行相同的旧 spark 2.x 版本(特别是 2.3)?

我有兴趣了解 yarn 、 hdfs 和 mapreduce API 的向后兼容性变化。

有人在生产中使用它吗?

0 投票
1 回答
222 浏览

hadoop - 使用 Ambari 安装特定版本的 hadoop

我是使用 Ambari 安装 HDP 的新手。我想使用 Ambari Web 安装来安装 Hadoop 2.9.0。我的 Ambari 版本是 2.7.0.0,我使用的是具有 Hadoop 3.1.0 的 HDP 3.0。但我需要安装 Hadoop 2.9.0。有人可以让我知道这是否可以做到吗?而如何做到这一点呢?

我还没有开始集群安装,我已经完成了 Ambari 安装。

0 投票
1 回答
356 浏览

sql - hive 1.2 sql 返回意外的特殊字符

运行以下 Hive 查询会返回特殊字符:

它返回结果为

它是一个已知的蜂巢虫吗?

解释计划

在这里禁用或启用配置参数可以帮助我吗?

如果我反转最外层选择中的列顺序,则查询返回预期结果。我本来希望结果是

颜色量

蓝色6203

红色7716

0 投票
2 回答
45 浏览

hive - Hive 计算统计 HDP 2.6

试图查看特定列的统计信息。我先执行了ANALYZE命令,然后尝试查看统计信息DESCRIBE FORMATTED <table_name> <col_name>

我看不到任何价值。知道为什么它没有显示任何值吗?

MSCK再次尝试并分析了该表并检查了统计数据。到目前为止没有运气。

0 投票
1 回答
1453 浏览

ambari - Ambari UI 上的 User:admin 凭据与 Ranger 不同步

Ambari 向我显示了一条警报消息:

“游侠管理员密码检查用户:Ambari UI 上的管理员凭据与游侠不同步”

我该如何解决这个问题?我需要做什么。

我尝试为(amb_ranger_admin、admin 等)设置相同的密码,但没有帮助。

我的 Ambari 版本是 2.7.1 HDP 3.0.1