如何在Azure数据工厂中将HH：MM：SS转换为总秒数
在Azure Data Factory中，如何将"；hh：mm：ss"；转换为总秒数。 在添加动态内容&部件中，我要使用Azure Data Factory中的"；@Activity(‘dataflow’).Duration"；来获取我当前活动的持续时间。但是，我发现"；@Activity(‘dataflow’).Duration"；格式为&quo
..
azure-data-factory-pipeline相关内容
ADF-如何将包含多个工作表的Excel工作表复制到单独的.csv文件中
我当前有一个包含多个工作表(超过11个)的Excel文件。此Excel文件当前位于远程文件服务器中。我正在尝试使用Azure Data FactoryV2复制Excel文件，并在ADLS Gen2文件夹中将每个工作表拆分为其自己的.csv文件。这是因为并不是每个选项卡都有相同的架构，我希望以后只选择有效的。 我目前有一个ADF数据集，它正确地指向Excel数据集，并使用@Dataet.Sheet
..
Azure数据工厂在插入到数据库之前合并到文件
我们有两个文件，分别是^分隔文件和逗号分隔的txt文件，它们存储在Blob存储中，如下所示 File1字段类似 ItemId^Name^c1^type^count^code^Avail^status^Ready 文件2字段类似 ItemID、Num、c2 在这里，这两个文件中的第一列是键，根据它，我需要使用Azure数据工厂将它们插入到Azure DB上的一个表中。有
..
检查存储中是否有所有文件-Azure ADF
在Azure数据工厂中，如何检查字符串数组(文件名)是否包含值？ 我正在从获取元数据活动中获取文件名，在继续之前，我需要检查我拥有的所有4个文件名在存储帐户中是否都可用。 我希望有4个文件进入存储帐户，我需要检查这4个文件是否全部可用。我需要显式检查文件名，而不是文件数量--这是一个要求 当我尝试使用Get Meta Data中的子项进行验证时，遇到错误"array elements
..
使用Azure数据工厂在不同文件夹中复制不同格式的文件
我是Azure Data Factory的新手，我正在尝试解决一个特定的用例。我必须将文件从源文件夹复制到目标文件夹，这两个文件夹都在同一个存储帐户中。源文件夹中的文件格式不同(csv、txt、xml)，并在末尾附加日期，例如：Addresses_2020-11-01.csv(日期格式：yyyy-mm-dd) 我必须创建一个管道来排序和存储此层次结构中的动态文件夹中的文件：ex：csv->；
..
在ADF ARM模板中参数化自托管集成运行时
我们有不同的ADF环境，例如TST，UAT&产品在每个环境中，自托管的IR名称是不同的.是否可以在ADF ARM模板中参数化集成运行时，以便当ARM模板通过CI/CD部署时，我们可以在部署期间在DevOps Variable组中传递IR名称. 我尝试使用以下设置更改ADF中的参数化模板，但是IR名称在ARM模板参数JSON'arm_template_parameters.json'中仍然不可
..
如何在管道执行之间在Azure Data Factory中存储运行时数据?
我一直在关注Microsoft的教程从SQL Server数据库增量/增量加载数据. 它使用水印(时间戳)来跟踪自上次以来已更改的行.教程使用“存储过程"将水印存储到Azure SQL数据库.管道中的活动，因此可以在下一次执行中重复使用. 拥有一个Azure SQL数据库仅用于存储少量的元信息(我的源数据库是只读的btw)似乎有点过分.我宁愿将其他地方存储在Azure中.也许在Blob
..
如何从SQL Server表导出到Azure Data Factory中的多个csv文件
我在sql server中有一个简单的客户表，其中包含2列-客户名称和城市.在Azure数据工厂中，如何将该表导出到多个csv文件中，每个文件将仅包含来自同一城市的客户端列表，这将是文件名 我已经尝试并成功使用 lookup和foreach 将其拆分为不同的文件，但是数据仍然没有被城市过滤 有人有任何想法吗? 解决方案 您需要遵循以下流程图: 查找活动:查询:从表格中选择
..
使用azure devop的ADF部署是否会影响环境中现有的管道/作业
我正在Azure数据工厂中实现AzureureOps. 我的开发环境ADF已集成到git存储库中. 我创建了一个构建管道，用于在adf_publish分支发生更改时构建构件. 下一步是将ARM模板工件部署到PROD环境. 假设在将DEV更改部署到PROD时，PROD环境中有许多触发的管道，并且PROD env中正在运行的管道很少. 我的问题是: 如何将更改从De
..
Azure Data Factory按文件大小拆分文件
我过去两周的Azure经验中的 .我想根据大小分割文件.例如，有一个具有200k行的表，我想设置一个参数以将该表拆分为多个文件，每个文件限制为100Mb(如果有意义).它将返回 N 个文件，具体取决于表的大小.像这样: my.file_1ofN.csv 我正在浏览文档，博客和视频，并可以使用个人帐户中的python脚本使用Azure Functions，Azure Batch和Dat
..