在pyspark-notebook docker容器上运行magellan

Question

我正在通过docker工具箱在Windows 7计算机上运行jupyter/pyspark-notebook。>>

我的启动命令是：

docker run -it --rm --name ds -v /c/Users/<some-folder>:/home/jovyan/work/share -p 8888:8888 jupyter/pyspark-notebook start-notebook.sh
我要运行火花包装麦哲伦。在笔记本中，我正在运行：

import os
os.environ['PYSPARK_SUBMIT_ARGS'] = '--packages harsha2010:magellan:1.0.4-s_2.11  pyspark-shell'
import pyspark
sc = pyspark.SparkContext('local[*]')
from magellan.types import Point, Polygon
但是找不到模块magellan。

我想念什么？

我正在通过docker工具箱在Windows 7计算机上运行jupyter / pyspark-notebook。我的启动命令是：docker run -it --rm --name ds -v / c / Users / ：/ home / jovyan / work / share -p 8888：...

Answer 1

[似乎Magellan软件包没有安装在Docker容器的Python中。您可以在Jupyter Notebook中轻松完成此操作。只需在单元格中执行以下命令：