我在azure门户中有一个file_storage,大致类似于:
- 01_file.txt
- 02_file.txt
- 03_file.txt
在azure数据工作室中,我有一个与此文件存储链接的数据集。
如果可能,我想遍历此目录并获取我的ETL管道中所有文件名的列表。
我看过For Each
和look up
,但我不知道如何将其应用于目录。
最终结果将是文件名列表,然后我将在将数据提取到天蓝色之前执行一些进一步的步骤。
我目前的解决方法是创建一个JSON文件,当我将数据加载到文件存储中并使用look up
和For Each
解析该文件时列出文件名,但我想知道是否有更好的解决方案使用datafactory?