AWS r4.16xlarge 集群中的核心数

问题描述 投票:0回答:0

我有一个 10 节点的 AWS r4.16xlarge 集群,在 Spark UI 的执行器选项卡下,每次我旋转集群时“核心”下的数字都不同,有时显示 200,有时显示 300。我不确定它是否与动态分配有关。我想知道集群配置中可用内核的总数,以便我可以相应地设置 spark 参数。

pyspark amazon-ec2 amazon-emr
© www.soinside.com 2019 - 2024. All rights reserved.