如何在HDP 3.1中以外部形式在蜂巢中火花写入(创建)表

问题描述 投票:0回答:1

默认]

spark-shell --conf spark.hadoop.metastore.catalog.default=hive
val df:Dataframe = ...
df.write.saveAsTable("db.table") 

在尝试写入内部/托管/事务表时失败(请参见How to write a table to hive from spark without using the warehouse connector in HDP 3.1

如何告诉spark不创建托管表,而是创建外部表?

默认的spark-shell --conf spark.hadoop.metastore.catalog.default = hive val df:Dataframe = ... df.write.saveAsTable(“ db.table”)尝试写入内部/时失败托管/交易...

apache-spark hive apache-spark-sql cloudera hdp
1个回答
0
投票

对于现在来说,默认情况下禁用事务表对我来说似乎是最好的选择。

© www.soinside.com 2019 - 2024. All rights reserved.