2
[I 10:43:53.627 NotebookApp] 启动notebooks 在本地路径: /opt/soft/recommender/jupyter

[I 10:43:53.627 NotebookApp] 本程序运行在: http://10.48.204.120:8888/

[I 10:43:53.627 NotebookApp] 使用control-c停止此服务器并关闭所有内核(两次跳过确认).

[W 10:43:53.628 NotebookApp] 没有找到web浏览器: could not locate runnable browser.

[I 10:44:11.697 NotebookApp] Kernel started: 7ea0717b-b85b-44b1-bd10-7a2079b24d94

[I 10:44:11.708 NotebookApp] 302 GET /notebooks/doc/source/images/als-diagram.png (10.252.183.252) 6.63ms

[I 10:44:14.691 NotebookApp] KernelRestarter: restarting kernel (1/5), new random ports

[I 10:44:17.719 NotebookApp] KernelRestarter: restarting kernel (2/5), new random ports

[I 10:44:20.746 NotebookApp] KernelRestarter: restarting kernel (3/5), new random ports

[I 10:44:23.774 NotebookApp] KernelRestarter: restarting kernel (4/5), new random ports

[W 10:44:26.800 NotebookApp] KernelRestarter: restart failed

[W 10:44:26.801 NotebookApp] Kernel 7ea0717b-b85b-44b1-bd10-7a2079b24d94 died, removing from map.

[W 10:45:11.836 NotebookApp] Timeout waiting for kernel_info reply from 7ea0717b-b85b-44b1-bd10-7a2079b24d94

[E 10:45:11.839 NotebookApp] Error opening stream: HTTP 404: Not Found (Kernel does not exist: 7ea0717b-b85b-44b1-bd10-7a2079b24d94)

[I 10:46:11.948 NotebookApp] Saving file at /notebooks/elasticsearch-spark-recommender.ipynb

我正在尝试使用命令通过 pyspark 启动 jupyter notebook:

PYSPARK_DRIVER_PYTHON="jupyter" PYSPARK_DRIVER_PYTHON_OPTS="notebook"
../spark-2.2.0-bin-hadoop2.7/bin/pyspark --driver-memory 4g --driver-class-path /opt/soft/recommender/spark/elasticsearch-hadoop-5.3.0/dist/elasticsearch-spark-20_2.11-5.3.0.jar

我可以通过远程浏览器打开jupyter,但是由于内核重启失败,我无法通过jupyter运行python demo。

python版本是3.5.0。Jupyter 和 ipykernel 都是最新的。prompt-toolkit版本是 1.0.15。

如果我prompt-toolkit将版本更新到 2.0.4,那么启动 pyspark 会抛出很多错误消息。

我该如何解决?

4

5 回答 5

4

这篇文章在我的情况下解决了。 Jupyter-notebook 报错 KernelRestarter: restart failed 或者“内核启动,请稍候”

基本上,卸载文章中列出的所有软件包并重新安装 jupyter 和 notebook

pip uninstall -y ipykernel ipython jupyter_client jupyter_core traitlets ipython_genutils jupyter notebook tornado
pip install jupyter notebook
于 2021-02-21T21:28:56.310 回答
1

我已将其更新为:

pip install --upgrade prompt-toolkit==2.0.4 (旧是1.0.15)</p>

pip install --upgrade ipython==7.0.1 (旧是6.5.0)</p>

pip install --upgrade jupyter-console==6.0.0 (旧是5.2.0)</p>

但是,上述问题并没有解决,上述信息保持不变。

于 2018-10-10T08:18:10.847 回答
0

我用这个命令解决了这个问题:

sudo -H pip3 install fs
sudo -H pip3 install prompt-toolkit --force-reinstall
pip3 install prompt-toolkit --force-reinstall
于 2019-08-03T04:20:06.933 回答
0

问题已经彻底解决了。经过查找,我在配置spark2.2.0环境变量时丢失了python的配置项,导致内核重启失败。环境变量的配置如下:

导出 PYTHONPATH=$SPARK_HOME/python/:$PYTHONPATH

导出 PYTHONPATH=$SPARK_HOME/python/lib/py4j-0.10.4-src.zip:$PYTHONPATH

您也可以尝试重新安装“sudo pip install py4j”和低版本的“sudo pip install --upgrade numpy==1.13.0”库。解决后,集成系统可以顺利运行,进行矩阵分析

于 2018-10-19T07:54:22.347 回答
0

我已经通过其他方式修复它:重新安装python,重新安装pip和其他模块,例如jupyter、tmdbsimple、elasticsearch等。

但是这个错误我猜是内存不足,因为当我加载大量数据分析时,又会出现这个异常信息,我也在尝试分别部署es和spark,寻找其他解决方案

如果您有更好的诊断避免方法,请给我留言

于 2018-10-17T02:53:33.497 回答