hdinsight 相关问题

HDInsight是Microsoft Azure上提供的Microsoft大数据平台。

如何通过livy杀死火花/纱线工作

我试图通过livy使用rest api提交spark工作。但是如果我多次运行相同的脚本,它会运行具有不同作业ID的作业的多个实例。我正在寻找杀死火花/纱线工作的方法......

回答 2 投票 1

HDInsight群集创建cmdlet错误

尝试在powershell中运行cmdlet以使用ARM模板创建集群时出现错误。如果我从Azure门户运行它,模板运行正常。错误:新-...

回答 1 投票 0

查找可用于某个区域的总核心数

我需要提取与我的订阅相对应的可用核心总数。我解雇了以下查询,它返回了vCPU的值。 ** az vm list-usage --location westus --...

回答 1 投票 -1

在HdInsight上使用PySpark3中的其他库

我正在尝试安装Shapely库但是当我导入它时,我收到错误消息:> from shapely.geometry import Point没有名为'shapely'的模块Traceback(最近调用最后一次):ImportError:...

回答 1 投票 0

如何以自定义格式加载带时间戳的CSV?

我在csv文件中有一个时间戳字段,我使用spark csv库加载到数据帧。同一段代码在我的本地机器上使用Spark 2.0版本,但在Azure上抛出错误...

回答 2 投票 7

无法列出HDInsight群集

我正在尝试使用azure命令行界面。我导入了清单文件,并且能够运行azure hdinsight -h和azure帐户列表(这给了我很好的凭据)。但是,我......

回答 1 投票 0

无法查询/选择通过Spark SQL插入的数据

我试图将数据插入具有分区的Hive托管表。显示create table输出以供参考。 + ------------------------------------------------- ----------------------------------...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.