从Azure Data Lake商店gen1获取元数据

问题描述 投票:0回答:1

我们希望从文件系统中获取元数据。有没有像fsImage那样存储这样的medata信息?我们使用以下命令:

curl -i -X GET -H 'Authorization: Bearer <REDACTED>' 'https://<yourstorename>.azuredatalakestore.net/webhdfs/v1/?op=LISTSTATUS'

但这只列出了一个级别的元数据。根据HDFS Api文档,尝试使用以下命令:

curl -i -X GET -H 'Authorization: Bearer <REDACTED>' 'https://<yourstorename>.azuredatalakestore.net/webhdfs/v1/?op=LISTSTATUS_BATCH&startAfter=<CHILD> #added code style

但它给出了错误,它没有实现。

metadata azure-data-lake
1个回答
0
投票

我检查了Azur支持,他们提到并不是Hadoop提供的所有方法都已实现。所以在我的情况下LISTSTATUS_BATCH没有实现。

© www.soinside.com 2019 - 2024. All rights reserved.