文件名上的字符串函数并作为附加列添加 [英] String function on filenames and adding as additional column

查看:10
本文介绍了文件名上的字符串函数并作为附加列添加的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

我在BLOB存储中有CSV文件,文件名以下划线分隔,如100001_1036_1595841882.csv。我想将这些CSV推送到Azure Synapse中,但要为文件名中的每个分隔字段添加列。

我尝试在复制活动中使用新的&Quot;Additional Columns";功能,但不知何故无法将字符串函数与$$FILEPATH一起使用(见下图)。仅$$FILEPATH可以单独使用。

推荐答案

您可以使用复制活动来完成此操作,但您必须使用不同的方法,而不是使用$$FILEPATH变量,该变量无法使用添加动态内容的公式生成器进行操作。

如果您将文件名作为参数传递给管道,则可以像往常一样操作它。例如,如果您有一个基于事件的触发器,您可以从那里提取文件名。

在上面的屏幕截图中,您可以看到我如何使用@split(pipeline().parameters.fileName, '_')[0]函数提取文件名的不同部分。我对每个部分都这样做,并添加$$FILEPATH以获得完整的文件名(当然,您也可以使用@pipeline().parameters.fileName中的值)。对于上一部分,我还删除了文件扩展名。

在源和接收之间执行映射时,其他列将显示为源数据集中的任何列。

管道执行完成后,SQL表包含所有相关数据

这篇关于文件名上的字符串函数并作为附加列添加的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆