hdinsight 相关问题

HDInsight是Microsoft Azure上提供的Microsoft大数据平台。

无法在Ambari中加载纱线应用日志

我无法在Ambari中加载纱线应用程序日志。在ambari门户中单击链接“ Resourcemanager UI”->“应用程序”->“应用程序ID”后,它将继续加载页面,并且无法查看...

回答 1 投票 0

Databricks的查询与HDInsight Cluster的比较

与HDInsight集群相比,我对Databricks实现的查询很少。当前,HDInsight群集中的/ bin /中运行的Python文件很少。是否可以上传相同的内容...

回答 1 投票 0

HDInsight Cluster 4.0(具有现有的Hive metasore)。错误-FailedToSetupDatabaseErrorCode

根据Azure HDInsight文档,我看到带有现有Hive Metastore数据库名称输入的新用户界面,不需要对数据库连接进行身份验证。该UI是否符合预期?

回答 1 投票 0

将并行执行中的多个TB文件加载到AZURE cloud SQL数据库中

我有多个Terabyte文件,需要将它们加载到数据库中,该数据库位于云中的高性能AZURE SQL服务器之上。现在,我正在尝试通过SSIS包加载这些文件...

回答 1 投票 0


Hive和Hdinsight与Azure上的python的连接性

我想用python脚本将hive与hdinsight群集连接,但由于访问问题而无法访问群集仪表板,这将为我提供JDBC URL信息,这有助于制作...

回答 1 投票 0

如果我所有的资源都在同一订阅中,是否真正使用了用户分配的托管身份?

我正在尝试在特定的订阅中创建HDInsight群集。现在,我选择的默认存储类型为ADLS Gen2类型,并且该存储实例存在于同一订阅中(...

回答 1 投票 0

无法看到ADLS Gen2的“生命周期管理”选项

我已经创建了ADLS(Azure数据湖存储)Gen2资源(启用了分层名称空间的StorageV2)。我在其中创建资源的区域是美国中部,性能/访问层是...

回答 1 投票 1

共享的外部配置单元元存储如何取决于特定版本的HDInsight(Hadoop)集群?

假设我们有一个外部Hive Metastore,然后有许多Hadoop(HDInsight)集群,我们将在需要处理时删除和创建这些集群,这些集群都使用此共享的...

回答 1 投票 0

如何从基于Intellij的本地Spark Server从HDInsight中的Hive群集访问表

我无法从我的本地实例(其中应用程序基于Intellij和Maven构建的HDInsight中访问和读取HDInsight中的Hive表中的数据)。有人可以帮我什么前提条件...

回答 1 投票 0

本地服务器中构建的Spark应用程序,我们如何访问位于HDInsight中的Hive Warehouse

我正在尝试使用IntelliJ Maven使用Spark local连接到HDInsight中的Hive仓库目录。我在Scala和Maven Project中使用Spark 1.6。 Thrift服务器详细信息:`...

回答 1 投票 -1

HiveQL中的变量

背景:作为现代化工作的一部分,我试图将一个大型存储过程转换为HiveQL脚本。作为蜂巢活动的一部分,HiveQL脚本在Azure HDInsight群集上运行...

回答 1 投票 1

jdbc.SQLServerException:将数据导出到Azure SQL Server时找不到数据类型'TEXT'

我已经在Azue HDInsight的scala spark 2.1中创建了一个数据框。我正在尝试使用PostgreSQL包将数据帧写入SQL数据仓库。我尝试了以下命令来编写:df1.write.format(...

回答 1 投票 1

在Hive上为具有凭据的Azure Blob创建EXTERNAL表

我们在s3中有很多存储帐户,现在在wasb(azure blob)中。当我如下所示的EXTERNAL TABLE时,我提供了s3的访问和秘密密钥。如果不存在,则创建外部表Table_S3(col1 ...

回答 1 投票 0

如何将文件系统MAPR和HDInsight Blob存储之间DistCp使用

我试图执行下面的命令DistCp使用,但它是抛出异常:Hadoop的DistCp使用date_load = 201901 * wasb://[email protected]/luiz/producao/performance/ .. 。

回答 1 投票 0

如何在HDInsight群集上查找不同节点的IP地址

我有一个运行Storm的HDInsight集群。此群集是在没有DNS的情况下设置的(不是我),因此只能使用URL中的IP地址进行访问。如何查找头节点的IP地址? ...

回答 3 投票 1

在HDInsight 404 Ambari API返回

我正在尝试在HDInsight群集上使用Ambari API的一些基础知识。以下请求都返回404(使用浏览器和REST客户端都尝试过)https:// mynewclusterabcd ....

回答 1 投票 0

使用另一个表中的select创建外部表

我正在使用HDInsight,并且在完成运行查询后需要删除我的集群。但是,我需要我收集的数据才能存活一天。我正在研究会创建的查询......

回答 3 投票 7

为HDLnsight群集提供对ADL存储帐户的所有文件夹的访问权限

我正在尝试将ADL存储(ADLS)帐户添加到我的HDInsight群集。 1)我使用Azure Active Directory(AAD)创建了服务主体(SP)2)我将此SP访问权限授予了......

回答 2 投票 1

ClassNotFound与Ozzie,Azure HDInsight和Spark2

经过一周的研究,不得不提出这样的要求:环境:Azure HDInsight Oozie版本:“Oozie客户端构建版本:4.2.0.2.6.5.3004-13”Spark:Spark2我的程序:简单的Scala程序......

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.