ADF中的文件级别验证 [英] File Level Validation in ADF

问题描述

在系统设计期间，我遇到了来自客户的一个查询.

During the system design I come across one query from my client. 

需求是使用ADF V2将数据从多个本地数据源(结构化和非结构化)移动到Azure Data Lake Gen2.

Req is to use ADF V2 to move data from multiple on-premise data source (structured and unstructured) to Azure Data Lake Gen2. 

他们几乎不需要提供验证的条件

Few of the requirement they have to provide validations on 

源文件级别的重新检查过程(自动)

Source File level recons process (automated)

有没有活动或任何方法来实现它?

Is there any activity or any way to achieve it? 

数据将最终转移到数据溴化数据库中，数据目录也将得到维护.

Data will be finally move to databrics and  data catalog will be maintained as well. 

推荐答案

你好，

尽管它不能满足您的所有要求，但获取元数据"活动可能会很有用:

Although it does not do all the things you asked, the Get Metadata activity may be useful:

https://docs.microsoft.com/zh-cn/azure/data-factory/control-flow-get-metadata-activity

https://docs.microsoft.com/en-us/azure/data-factory/control-flow-get-metadata-activity

这篇关于ADF中的文件级别验证的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！