docker zeppelin上的docker spark?

问题描述 投票:0回答:1

我是Docker的新手对docker容器的概念感到困惑

我正在尝试在齐柏林飞艇上使用以下网站的火花https://github.com/big-data-europe/docker-spark

此网站我下载了Zeppelin Docker容器https://www.youtube.com/watch?v=6dokFasXyQw&t=2s

现在我有了这个Docker容器

1a8030d60105        bde2020/spark-worker:2.4.4-hadoop2.7   "/bin/bash /worker.sh"   13 days ago         Exited (137) 12 days ago    8081/tcp            spark-worker-1 <br/>
efbf74de4e87        bde2020/spark-master:2.4.4-hadoop2.7   "/bin/bash /master.sh"   13 days ago         Exited (137) 2 days ago                         spark-master <br/>

76fa0e88ad99        dylanmei/zeppelin:latest               "bin/zeppelin.sh"        2 weeks ago         Exited (143) 15 hours ago                       zeppelin <br/>

如果我想让齐柏林飞艇图像上的这位火花大师或工人,我该怎么办?我应该知道哪个概念?有没有好的文档或教程可以做到这一点?

我一直在搜索,但我猜'纱线'是正确的,但不确定请给我方向

docker apache-spark apache-zeppelin
1个回答
0
投票

[嗨,如果您打算使用Zeppelin https://www.youtube.com/watch?v=6dokFasXyQw&t=2s,则Zeppelin泊坞窗映像带有内置spark。您不必从https://github.com/big-data-europe/docker-spark启动docker。如果要指向其他Spark集群,则需要更改zeppelin的主配置zeppelin-env.sh。如果定义要实现的目标,将有助于获得解决方案。

© www.soinside.com 2019 - 2024. All rights reserved.