cloudera 相关问题

使用气流的飞羚查询

是否可以使用airflow的运算符之一来运行Impala查询，就像执行Hive查询一样？我想象bash运算符可以工作，但想使用气流API来做到这一点。

Mapreduce作业失败，并显示“ MAX_FAILED_UNIQUE_FETCHES;救助”

Map-reduce作业失败，并在化简器上出现以下错误：org.apache.hadoop.mapreduce.task.reduce.Shuffle $ ShuffleError：fetcher＃5中的org.apache.hadoop.mapreduce中的混洗错误。 ...

无法在Cloudera Manager上监视Impala查询

我安装了具有版本CM-6.3.1和CDH-6.3.2的新cloudera集群，现在面临以前的cloudera发行版，Cloudera Management Services（包括Cloudera ...）从未遇到的问题。]

hdfs moveFromLocal不在数据节点之间分配副本块

我最近将Cloudera环境从5.8.x（hadoop 2.6.0，hdfs-1）升级到6.3.x（hadoop 3.0.0，hdfs-1），并在使用moveFromLocal加载了几天数据之后，我才意识到DFS使用百分比...

Cloudera向导步骤“安装代理”中的SSH问题

我试图在服务器A和B（Ubuntu 18.04）上安装HBase，为此，我使用服务器A上安装的CDM（CDM 6.3.1〜1466458.ubuntu1804）处理服务器A和B上的HBASE安装。 ...

Apache Livy中的容错能力

关于在Apache Livy中实现容错的任何见识的人。假设Livy服务器无法实现HA。

Oozie Web Console运行非常缓慢

在我的群集中，Oozie Web控制台非常慢。当我转到Web控制台时，将请求传递到oozie服务器需要10 -15秒，然后再发布10秒钟才能发布从oozie获得的结果...

无法在Cloudera Hue的表详细信息中加载标签

我正在使用Hue访问Cloudera Impala。打开表浏览器并查看任意表的详细信息时，出现错误“无法加载标签”。如何获取标签？或者，...

如何为Kafka和Zookeeper设置JAVA_HOME Cloudera快速入门

获得从CDH Hadoop群集连接到S3的“对等未认证”异常

我正在尝试在Hadoop CDH群集上运行hadoop作业，并且当Hadoop作业尝试从S3存储桶读取数据时，出现以下错误。看起来它正在尝试通过SSL连接。有什么办法...

Hortonworks docker沙箱未在浏览器中加载

我已经按照同伴的指示安装了HortonWorks Docker沙箱。当我键入以下命令时，它似乎正在运行：sudo docker ps显示沙盒正在运行：容器ID图像...

每次重新启动都会替换Cloudera节点/etc/krb5.conf

我有一个问题，为什么我的cloudera节点每次重新启动都替换文件/etc/krb5.conf？我正在尝试进行修改，并且当有人发出重新引导文件时，该文件再次由...

impala创建外部表并删除双引号

例如，我在CSV上获得了数据：“女”，“ 44”，“ 0”，“ 0”，“是”，“政府工作”，“城市”，“ 103.59”，“ 32.7”，“以前吸烟”我把它和hdfs dfs一起放在hdfs上，现在我想从它在...

如何在pred hadoop集群上使用s3文件？

我有一个cloudera VM，能够设置aws CLI和设置密钥。但是，我无法使用hadoop fs -ls s3：// gft-ri或任何hadoop命令读取s3文件或访问s3文件。我可以看到目录/ ...

Cloudera到HDP SOLR（版本5.5.2）数据迁移|在solr云上还原后无法更新solr索引

SOLR版本-5.5.2我的项目要求是将solr云索引从cloudera集群传输到HDP集群。数据量巨大（生产中有10亿条索引记录，因此重新索引不是...

来自Confluent或Cloudera的Kafka？

我的问题很简单，但很复杂，在我目前的公司中，我们正在评估将卡夫卡与汇合使用或将卡夫卡与cloudera一起使用。我发现了您所在的融合版本的主题...

在Cloudera Impala（虚拟机）中创建数据库时出错

我已经下载并使用impala启动了cloudera虚拟机。在执行数据库创建语句时，出现了与目录和状态存储服务有关的错误。 ...

Cloudera Manager使用主机名而不是IP

我通过URI访问Cloudera Manager的位置：http：// cmhostname：7180 /重定向到IP地址http://xxx.xxx.xxx.xxx:7180/如何更改，以便CM使用主机名而不是DNS？ DNS和解析器有效...

PySpark无法从hdfs读取csv：HiveExternalCatalog错误

我是火花新手，在尝试调试错误时遇到了麻烦。我正在尝试从hdfs读取多个文件。我为此使用sparksession.read.csv，但出现错误：py4j.protocol.Py4JJavaError：An ...

运行多个SQL查询并测试是否通过Spark Scala失败

我正在运行100个查询（测试用例）以检查Spark Scala中的数据质量。我正在从配置单元表查询数据。对于这些示例查询，预期结果为空数据框：SELECT ...