datahub 连接到 hive,使用 kerberos,web-ui 中发生错误

问题描述 投票:0回答:1

当我使用datahub ui进行hive数据摄取时,出现了无法连接到它的异常

信息: [2024-02-04 08:11:42,352] 信息 {thrift.transport.TSocket:118} - 无法连接到 ('69.167.164.199', 10000)

这是我的食谱。

来源: 类型: 蜂巢 配置: 主机端口:'xxxxx.test.com:10000' 数据库:dm_prod 用户名:蜂巢 include_views:假 有状态摄取: 忽略旧状态:true 启用:真 数据库模式: 允许: - dm_产品 表模式: 允许: - 'dm_prod。*' 选项: 连接参数: 授权:KERBEROS kerberos_service_name:配置单元 方案:hive+https pipeline_name:摄取调度程序测试

当我在 cli 上运行此配方时,我可以正常摄取 Hive 数据。 然而,当我通过web-ui摄取数据时,它无法正确执行。 我很好奇,请问这是什么问题,谢谢

我尝试寻找解决方案,但到目前为止,仍然没有好的解决方案

kerberos datahub
1个回答
0
投票
source:
type: hive
config:
    host_port: 'xxxx.test.com:10000'
    database: dm_prod
    username: hive
    include_views: false
    stateful_ingestion:
        ignore_old_state: true
        enabled: true
    database_pattern:
        allow:
            - dm_prod
    table_pattern:
        allow:
            - dm_prod.*
    options:
        connect_args:
            auth: KERBEROS
            kerberos_service_name: hive
            scheme: hive+https

pipeline_name:'摄取测试'

© www.soinside.com 2019 - 2024. All rights reserved.