问题标签 [biginsights]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
2944 浏览

hive - 如何使用 bigsql 从 db2 中截断或删除分区?

我在 db2 中有一个表(使用 bigsql),它按照 IBM BigInsights 上的日期进行分区

我想要的是删除特定分区说20150810或从该分区中删除数据

我试过这个

但它给出了以下错误

有人可以指导如何做到这一点吗?

0 投票
1 回答
88 浏览

hadoop - 尝试绑定到应用程序时,Bluemix 中的 BigInsights 服务未显示

我在 Bluemix 中创建了 4 个服务,其中之一是“Big Insights for Apache Hadoop”。现在,当我尝试将其绑定到一个新创建的应用程序时,这个 BigInsights 服务没有出现?在“将服务添加到”新创建的应用程序“窗口中?

0 投票
2 回答
588 浏览

twitter - 在 IBM Bluemix 中使用 NODE-RED 创建仪表板页面

我正在尝试通过 twitter 节点提取推文然后在 IBM Big sheet 中生成可视化来在 NODE-RED 中创建一些图表。我可以实现这一点并且能够在 IBM 分析中查看图表/工作簿以获取 hadoop 服务,但我想要想知道 Bigsheets 图表的输出是否可以使用 NODE-RED 作为仪表板页面发布?我不确定如何在 IBM Bluemix 中处理这种情况,因为我有兴趣根据推文创建实时分析页面

感谢您的回复

0 投票
0 回答
1798 浏览

python - 来自 python 工作者的错误:/usr/bin/python 没有名为 pyspark 的模块

我正在尝试在 Yarn 上运行 Pyspark,但是当我在控制台上键入任何命令时收到以下错误。

我可以在本地和纱线模式下在 Spark 中运行 scala shell。Pyspark 在本地模式下运行良好,但在纱线模式下不工作。

操作系统:RHEL 6.x

Hadoop 发行版:IBM BigInsights 4.0

火花版本:1.2.1

WARN scheduler.TaskSetManager:在阶段 0.0(TID 0,工作)中丢失任务 0.0:org.apache.spark.SparkException:来自 python 工作者的错误:/usr/bin/python:没有名为 pyspark PYTHONPATH 的模块是:/mnt/sdj1/ hadoop/yarn/local/filecache/13/spark-assembly.jar (我的评论:这个路径在linux文件系统上不存在,但是逻辑数据节点) org.apache.spark.api.python.PythonWorkerFactory.startDaemon(PythonWorkerFactory.scala:163) 处 org.apache.spark.api 处的 java.io.DataInputStream.readInt(DataInputStream.java:392) 处的 java.io.EOFException。 python.PythonWorkerFactory.createThroughDaemon(PythonWorkerFactory.scala:86) at org.apache.spark.api.python.PythonWorkerFactory.create(PythonWorkerFactory.scala:62) at org.apache.spark.SparkEnv.createPythonWorker(SparkEnv.scala:102)在 org.apache.spark.api.python.PythonRDD.compute(PythonRDD.scala:70) 在 org.apache.spark.rdd.RDD.computeOrReadCheckpoint(RDD.scala:280) 在 org.apache.spark.rdd.RDD .iterator(RDD.scala:247) at org.apache.spark.scheduler.ResultTask.runTask(ResultTask.scala:61) at org.apache.spark.scheduler.Task.run(Task.scala:56) 在 org.apache.spark.executor.Executor$TaskRunner.run(Executor.scala:200) 在 java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1145) 在 java.util.concurrent.ThreadPoolExecutor$Worker .run(ThreadPoolExecutor.java:615) 在 java.lang.Thread.run(Thread.java:745)

我已经通过导出命令设置了 SPARK_HOME 和 PYTHONPATH,如下

有人可以帮我解决这个问题吗?

回答:

经过一番挖掘,我发现 pyspark 在开箱即用的 Big Insights 4.0 中确实存在一些问题。建议我们升级到 BI 4.1。

0 投票
1 回答
6235 浏览

apache-pig - PigLatin 不匹配的输入 ';' 期待 LEFT_PAREN (IBM BIGINSIGHTS)

对不起一个天真的问题。我是新手。我有一个 Pig 脚本并出现以下错误:

这就是我的 scipt 的样子:

这是堆栈跟踪:

0 投票
1 回答
682 浏览

mapreduce - 执行 sqoop 作业时出现运行时异常

我正在尝试在 biginsights 中执行 sqoop 作业。我正在将数据从 oracle db 导入 hdfs。下面是 sqoop 命令,它开始执行 mapper 并在一段时间后停止。

以下是错误:

请帮我解决这个问题。提前致谢。

0 投票
1 回答
866 浏览

hdfs - Sqoop eval is working but sqoop import is giving error

When i run sqoop eval its give me output. But when i do sqoop import its giving following error

I am using BigInsight. Anyone can please tell what is the problem.

0 投票
0 回答
172 浏览

hadoop - 可以flume 1.5处理/传输压缩文件到hdfs sink

可以flume 1.5处理/传输压缩文件到hdfs sink。我尝试使用blobdeserializer 和compressedstream 和编解码器作为gzip。我使用的配置选项如下

0 投票
0 回答
141 浏览

hadoop - Flume 获取 Twitter 数据

通过 Flume 获取 Twitter 数据时,当我启动代理时,出现以下错误:

我的失败可能是什么?我是 Flume 的绝对初学者!

0 投票
1 回答
58 浏览

ibm-cloud - 无法在 IBM BigInsights for Apache Hadoop 中定义集群

我无法开始在 BLuemix 上使用 IBM BigInsights for Apache Hadoop。

我无法单击管理集群或定义集群。当我单击时,我得到该页面不可用的信息。

问候,

斯尔詹