`spark-submit`没有Spark库的香草Python脚本

问题描述 投票:1回答:1

我有权访问Spark集群,并且我的Spark程序通常以]开始

spark = SparkSession \
    .builder \
    .getOrCreate()

这里是问题:我有一个Python程序尚未使用任何Spark库或RDD,因此不需要像上面那样创建SparkSession。我可以spark-submit原始Python脚本(不导入Spark模块)在单节点上运行吗?

我可以访问Spark集群,并且我的Spark程序通常以spark = SparkSession \ .builder \ .getOrCreate()开头。问题是:我有一个尚未安装的Python程序...

python apache-spark
1个回答
0
投票
我们在注释中已经有一个'是'和'否',所以我将添加'它取决于':)
© www.soinside.com 2019 - 2024. All rights reserved.