AzureDataFactory相关内容

如何连接Data Factory V2链接服务中的现有网关

在我们的组织中,每个品牌的Data Factory V1中都有多个管道,并且我们有一个名为"SQLServerGateway"的通用网关(自我-托管)用于所有这些管道的本地SQL Server 按计划运行良好. 现在,我们正在尝试在Data Factory V2中创建单个测试管道,该管道在Data Factory V1中也做同样的工作.因此,我们正在Data Factory V2中创建链 ..
发布时间:2019-06-19 04:50:14 其他开发语言

-805从ADF中的DB2数据源提取数据时发生错误

我们已经创建了一个Azure数据工厂连接,并且当我们单击“测试连接"时连接成功.但是,每当我们尝试使用此连接从DB2中提取数据时,都会收到一条错误消息: " 我们已经从MSDN找到了说明文件: DB2 for z/OS或LUW:使用高特权帐户-具有软件包权限和BIND,BINDADD,GRANT EXECUTE T​​O PUBLIC权限的超级用户或管理员-一次运行复制活动,然后运行所 ..
发布时间:2019-06-19 04:43:03 其他开发语言

在CosmosDB中启用upsert

你好, 我阅读了有关UpsertDocumentAsync以便在CosmosDB文档中进行upsert的一些内容. 可以为CosmosDB中的集合启用Upsert.表示每当我尝试插入并且ID已经存在时,请用新文档替换该文档. 如果这不可能,请帮助我如何实现以下目标. 我想创建复制任务,该任务从ADLS读取镶木地板文件并将其写入CosmosDB.我如何在这里获得upsert? ..
发布时间:2019-06-19 04:43:00 其他开发语言

Azure数据工厂加载数据时出现问题

我正在尝试从blob存储中加载很多csv文件通过Azure数据工厂迁移到Azure SQL数据仓库.由于我正在处理大量 行时,理想的方法是使用PolyBase批量加载数据.当我将源指向一个文件时,SQL DW PolyBase显示为true,但是当我指向所有csv文件时,SQL DW PolyBase显示为false.有没有人经历过 解决方案 嗨, ADFv2可视化工具最近在poly ..
发布时间:2019-06-19 04:42:54 其他开发语言

ADF定价API

嗨, 我可以在任何地方获得数据工厂活动运行的成本数据吗? 我已经在使用azure Analytics API,但是它确实给了我实际成本以及计算时的成本-有 差异 实际值之间 计费 . 解决方案 请参考帐单相关的api 这里. ..
发布时间:2019-06-19 04:42:35 其他开发语言

Azure Data Factory V1的源代码控制

Azure数据工厂V1是否提供源代码管理?我想将Data Factory V1中的所有数据集和管道添加到VSTS.我知道我们可以在Data Factory V2中做到这一点. 解决方案 ADFv1没有可用的源代码控制.但是,借助ADFv2,您将能够使用VSTS GIT进行源代码控制.请查看此文档到 参考如何使用它ADFv2 ..
发布时间:2019-06-19 04:35:37 其他开发语言

Azure数据工厂(V2)将具有更改名称的文件/文件夹从一个BLOB源复制到另一个BLOB源

你好 我希望有人能给我一些有关如何将具有更改的日期名称(格式YYYY-MM-DDTHH:MM:SSZ)的文件夹从BLOB源复制到BLOB目标的信息. 基本上,我只想从源中复制最新文件,而不是所有文件.我尝试使用以下格式,但对我而言不起作用: 容器名称/退出/{year}/{month}/{day}/{hour}/{minute}/{second} 任何帮助将不胜感激. ..
发布时间:2019-06-19 04:35:26 其他开发语言

计划的管道已禁用,并且必须在不同的时间运行

在Azure数据工厂中,我有一个计划的管道,该管道将在美国东部时间0500运行,但今天我必须禁用它,并自动在0900 EST运行,为此我必须在Version中给出哪些查询/语句. 1. 它是预定的管道,它将每天在美国东部时间0500运行,但我需要禁用它并在美国东部时间0900自动运行 为此,我要做的事情 解决方案 Raghu, 我不认为,您将能够在adfv1中更改一次管道 ..
发布时间:2019-06-19 04:33:52 其他开发语言

使用Data Factory v2访问Key Vault托管存储帐户

您好,我正在尝试创建到KV托管存储帐户的DF v2链接服务,并且密钥刷新存在问题. KV托管存储帐户似乎既不提供其密钥,也不提供SAS URI.它只是 自行制作SAS令牌. 由于我不确定何时刷新密钥,因此我不知道是否可以使用自动化来更新KV中的SAS URI机密.是唯一的选项来删除自动密钥刷新并使用自定义自动化来处理吗? 任何帮助都会很棒, 谢谢. 解决方案 你好, ..
发布时间:2019-06-19 04:33:40 其他开发语言

从多个Blob文件夹中删除*(所有文件)

嗨, 我有一个要求,我要使用ADF将文件从本地移动到Blob存储 在Blob中,我有一个容器, 容器名称=数据 我在容器数据下创建了许多文件夹 /Data/Rwa_data/ abc /abc.csv /Data/Rwa_data/ def /def.csv /Data/Rwa_data/ sss /sss.csv 现在,我想使用数据工厂从以上3个文 ..
发布时间:2019-06-19 04:30:32 其他开发语言

使用UI的数据工厂触发器在发布时引发错误

我从azure blob复制到azure sql服务器.当我手动触发它时,该管道可以正常工作.我仅将UI用于所有这些.当我在事件上创建触发器时,它将引发错误.我该如何解决?我认为这是应有的 到需要注册的microsoft.eventgrid,但是我现在拥有了它,并且仍然出现错误. Blob存储为V2.我该怎么做才能解决此问题? 错误为:状态响应:403禁止访问URL:https://mana ..
发布时间:2019-06-19 04:20:57 其他开发语言

数据复制中的ADFv2模糊处理选项?

这是审核要求.有可能,虽然在adf sql copy中,我们可以为某些dest列启用数据混淆吗?如果是,该如何实现? 解决方案 你好, 虽然屏蔽凭据很简单,但是我看不到屏蔽配置中的列名或数据的方法. 您可以在此处将其作为功能请求提出: https://feedback.azure.com/forums/270578-data-factory ..
发布时间:2019-06-19 04:20:13 其他开发语言

如何使用Azure Data FaCTORY v2在本地数据网关中发布多个节点?

我们已经能够使用一个节点进行连接,以安装自托管集成运行时. 一旦我创建了第二个,第一个就继续失败,并显示“无效的验证密钥"错误. 请协助. 我知道可以创建4个节点. 请协助使用Data Factory v2. 解决方案 嗨Arka, 您是否按照此处描述的步骤安装第二个节点? https://docs.microsoft.com/zh-cn/azure ..
发布时间:2019-06-19 04:18:39 其他开发语言

Dynamics 365复制-在SQL DEST/增量复制处自动创建表

需要将批量表数据从Dynamics 365云复制到Sql Server.通过复制向导,只有在目的地中创建相同的表定义后,我才能复制单个表. 在批量复制过程中,有什么方法可以在目标位置自动创建表结构吗? 另一个问题,如何创建增量副本动态365表中的数据,每个实体的修改日期都已更改.我已经通过在源代码中创建另一个watermarklookup表看到了从sql到sql的示例,但是在cloud ..
发布时间:2019-06-19 04:18:33 其他开发语言

添加新列?

我们正在使用从sql到sql的所有列进行完整的数据复制.定期使用ADF v2.如果同时在源表和目标表中添加了任何新列,会发生什么情况. 是 管道作业会自动识别新的数据列映射吗?还是我们必须手动编辑pipleline? 请告知是否可以实现自动数据映射? 解决方案 如果显式指定了列映射,则新列将被忽略.您必须手动更新管道. 但是,如果您的源列和接收器列匹配得很好,并说源列 ..
发布时间:2019-06-19 04:13:06 其他开发语言