AzureDataFactory相关内容

如何将活动状态写入参数

除了有关活动(状态,名称,读取的行)的其他一些信息外,我还需要捕获系统变量(管道名称等),并将其从复制任务传递到存储过程将信息写入表的任务 在Azure SQL数据库中. 除了系统变量之外,您如何访问其他部分(状态,行,活动名称)?如果选择连接复制任务和存储过程的行,则会在“输出"列表中看到一个表.带有这些字段的标签,但不确定如何引用 解决方案 您好,要引用存储过程中复制活动的输 ..
发布时间:2019-06-19 00:38:38 其他开发语言

设置引号字符导致不符合条件的条件以直接运行Polybase复制

我有一个CSV输入文件,该文件使用逗号(,)分隔. CSV中还有一些可能带有逗号字符的值,但是这些值都用引号(“)括起来,这是标准的CSV方式. 这是使用复制活动将数据加载到Azure数据仓库中.为了避免复制活动用逗号分隔值,我将数据集上的引号字符(quoteChar)设置为"quotes(").但是当我运行活动时 我收到以下错误 已设置引用字符.不满足直接运行Polybase复制的条 ..
发布时间:2019-06-19 00:38:31 其他开发语言

ADF复印错误

你好, 我正在做从CRM到CosmosDB的数据复制活动.我正面临着这个问题,并且数据根本没有被复制. 以下是我收到的错误消息: " Type = Microsoft.Azure.Documents.DocumentClientException,Message =分区范围ID 0 |无法导入小批量.出现异常消息:{\"Errors \":[\“遇到 执行函数时发生异常.异常= ..
发布时间:2019-06-19 00:35:55 其他开发语言

单个管道中的ADF V2多个活动

嗨, 我有一个包含多个活动的管道.每个活动都计划在不同的时间间隔触发,例如15分钟和1小时.在V1的早期版本中,我可以将每个活动配置为在不同的时间运行.但是我发现在V2中缺少此功能.我如何能 触发它们的方式不同吗?有人可以对此发表看法吗? 谢谢. 解决方案 嗨 我不认为可以那样做.建议:您无法将所有活动作为一个小组进行管理,这一事实使我认为将它们重组或划分为更多的渠道 ..
发布时间:2019-06-19 00:32:03 其他开发语言

从blob文件夹中移动文件年/月全部失败.如何再次运行一切

嗨, 在培训期间确实与Data Factory斗争. 我从“年"和“月"文件夹中输入了3个月的数据.我运行了管道,但它出错了.我已经更改了Json中的某些内容,但我不知道如何重新运行整个管道.我可以通过单击日期来重新运行一天活动窗口资源管理器但 我不知道如何重新运行所有内容. 如果您弄乱了一些代码并不得不对其进行更新,是否可以清除所有失败并从头开始重试? 任何帮助将不胜感激 ..
发布时间:2019-06-19 00:29:02 其他开发语言

Dynamics 365查找字段未在映射中列出???

在Dynamics实体中,我们具有Lookup字段,这些字段在ADF复制向导的映射中不可见,或者也尝试使用fetchxml属性.如何复制查询字段数据? ADFV2是否支持动态查找字段数据? 解决方案 你好, 您是否尝试过显式列映射: https://docs.microsoft.com/zh-CN/azure/data-factory/copy-activity-sc ..
发布时间:2019-06-19 00:24:02 其他开发语言

从Azure数据工厂获取电子邮件通知

如何获取警报电子邮件一旦Datafactory启动/完成/失败,一个或多个电子邮件ID 请提出如何进行的建议. 解决方案 嗨, 您可以尝试两种方法 使用警报规则- https://www.youtube.com/watch?v= oWcIm7HCIAc 在管道内- https://docs.microsoft.com/zh-CN/azure/data-factory ..
发布时间:2019-06-19 00:20:45 其他开发语言

尝试连接到Oracle时出错

大家好, 我正在尝试指定Oracle数据库连接,但始终收到错误消息: 处理请求时出错,错误[080001] [Microsoft] [ODBC Oracle Wire Protocol驱动程序] [ORACLE] TNS-12505:TNS:侦听器无法解析连接描述符'Type =,Message = ERROR中给出的SID [08001] [Microsoft] [ODBC Orac ..
发布时间:2019-06-19 00:13:56 其他开发语言

从Oracle迁移到SQL Server

您好, 我有2个要求,并且需要有关的指导.为此,我正在使用Azure数据工厂. 1)我想将一些表数据从本地/云Oracle数据库复制到云Oracle数据库.我能够从本地/云SQL服务器复制到云SQL服务器..使用Azure数据工厂时的配置如何. 2)如何将内部部署中的所有Oracle表完整迁移到Cloud Oracle. 请帮忙. 解决方案 您好,本地/云作为源数据库和接收器数据存储 ..
发布时间:2019-06-19 00:11:24 其他开发语言

如何重新配置​​集成运行时(自托管)节点?

Microsoft集成运行时配置管理器第一次接受该密钥,此后,如果我想修改该密钥,则不允许我使用,已在配置文件中验证,找不到它.. 每次需要配置新的数据工厂时,我都会重新安装,只有在此之后我才能使用Key(密钥)选项. help 解决方案 除非他们最近对其进行了更改,否则更改密钥的唯一方法是卸载并重新安装IR. ..
发布时间:2019-06-19 00:11:09 其他开发语言

在复制数据活动中使用Polybase

我将要从azure blob存储导入一个csv文件到datawarehouse.有一个选项可以在复制活动中启用多库复制,但是在发布时会出错 有什么想法吗? 解决方案 您好樱井, 根据错误消息,您需要在azure blob数据集中进行以下设置: 1.保持“将空列的值视为空".复选框. 2.将NULL值设置为空字符串. 此处对您来说是一个有用的链接.谢谢. ..
发布时间:2019-06-19 00:08:34 其他开发语言

Http Source到Azure SQL表

您好, 我正在从事数据工厂复制活动,并且在将http源转换为azure sql作为目标表时遇到了问题. 以下是错误 {"errorCode":"2200","message":"'Type = Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message =读取HTTP文件超时,请指定 较长的httpRe ..
发布时间:2019-06-19 00:05:25 其他开发语言

在Azure数据工厂中创建新的链接服务时遇到问题

嗨, 我正在尝试在Azure数据工厂中创建新的链接服务. 1-"Microsoft Integration Runtime";已经安装并且在“诊断"中具有成功的完整测试.使用ODBC到Oracle 11g 64位数据库.连接测试成功完成. 2-在AzureDataFactory中,在集成运行时中,类型为“自托管".并且状态为“正在运行". 有了这个,我想说的是,从内部部署的 ..
发布时间:2019-06-19 00:05:22 其他开发语言

Azure数据工厂复制活动的性能问题!

在从Blob存储到SQL DW使用BulkCopy时,我遇到性能问题,因为进行了几次故障排除,所以我一直在进行故障排除 天,但到目前为止没有结果.但是,当我在“复制数据"活动中使用Polybase时,它的速度非常快,只需几秒/分钟即可完成,而不是数小时.我正在使用以下高配置,仍然没有帮助. Azure SQL DW – DWU – 1500复制活动–数据 集成单元– 16复制活动–复制程度并行– ..
发布时间:2019-06-19 00:02:05 其他开发语言

日期时间过滤器

您好, 当前,我正在尝试通过ADF实现增量加载.每次我运行复制活动时,我都会看到数据翻了一番,存储在天蓝色表中.那就是如果我的源表中有50行,并且如果我从源到暂存运行了两次我的工作(Azure表) 存储空间)有100行.当我尝试过滤时,出现错误,并且没有任何行返回. 表存储中存在的 DateTime就像这样 解决方案 1.源和接收器都是天蓝色的表存储,对吗? 2.请按照 ..
发布时间:2019-06-18 23:59:05 其他开发语言

通过ADF Web组件进行Mixpanel集成?

当前,我们正在使用mixpanel python脚本下载数据.有人在ADF中完成了mixpanel API集成吗? 如果是,该如何实现? 解决方案 您能详细说明一下用例是什么意思吗?与ADF集成?您是否要使用和转换混合面板api返回的数据? ADF中有一个Web活动,您可以使用它来触发HTTP调用并将其输出连接到下一个活动以进行进一步处理,因此,如果您可以通过HTTP调用m ..
发布时间:2019-06-18 23:58:57 其他开发语言