问题标签 [hadoopy]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
0 回答
46 浏览

python - 如何使用 Python 的 Hadoopy 库将变量传递给 Mapper?

在基于 Hadoopy 库的 Python 上运行 MapReduce 作业时,如何将变量(除了键值对)传递给映射器?

我找不到任何示例或文件来说明这一点。有人可以给我看一个例子或指出参考吗?谢谢!

0 投票
1 回答
56 浏览

python - hadoopy.launch_frozen 无法执行脚本

我正在运行命令 hadoopy.launch_frozen。

当我运行我的脚本时,会出现这个错误:

0 投票
0 回答
298 浏览

python - 使用 Hadoopy 从 HDFS 读取文件

我正在使用 Python 从 HDFS 读取文件。使用的库是Hadoopy
早些时候,我能够使用 Hadoopy 将相应的文件写入 HDFS。
但它不会从 HDFS 读取并存储到本地文件系统中。

代码粘贴在下面:


如何使用 Hadoopy 读取文件?

0 投票
0 回答
494 浏览

python - 如何在 python 中安装 hadoopy 包?

我正在尝试使用下面提到的代码通过 Python 脚本将文件写入 HDFS。

在这种情况下,为了执行上面的代码,我试图pip install hadoopy打包在cmd中,但安装失败。还尝试通过下载hadoopy-0.5.0.tar.gz进行安装,但没有成功。请帮我解决这个问题。

错误 :

提前致谢..!

0 投票
1 回答
184 浏览

google-cloud-platform - 在 google composer 中安装 hadoopy

我正在使用google composer.

我们如何.google composer environment

这个页面有在 Linux 机器上安装hadoopy 的步骤

Github 克隆

画中画安装

我不知道如何在 Google Composer 环境中安装它