用于列出HADOOP 2.x中映射器和缩减器数量的命令

Question

是否有任何hadoop / yarn命令可以动态列出作业使用的映射器/减速器/插槽的数量

Answer 1

YARN处理容器和内存而不是Mappers和Reducers。

为了获取您的信息，您可能需要采用两步法。运行YARN Resource Manager Cluster Application API以获取应用程序主URL。

然后针对AM URL运行Mapreduce Application Master Info API以获取正在运行的映射器和缩减器的数量。