从 deequ VerificationSuite 获取错误记录

问题描述 投票:0回答:0

当我们运行任何deequ VerificationSuite时,当规则有任何错误时,我们是否可以看到关于每个规则的输入数据异常记录。例如:如果 rule1 在总共 100 条记录中有 10 条记录失败,我只会看到摘要,上面写着 10 条记录验证失败,但我看不到实际数据(这 10 条记录)。我如何识别这 10 条记录并将其发送到不同的目标。

scala apache-spark amazon-data-pipeline amazon-deequ scala-spark
© www.soinside.com 2019 - 2024. All rights reserved.