使用Python将数据写入雪花 [英] Writing data into snowflake using Python

查看:16
本文介绍了使用Python将数据写入雪花的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

是否可以使用Python将数据直接写入雪花表,而不使用Snowflake内部Stage?

似乎是一项辅助任务,首先在阶段中写入,然后进行转换,然后将其加载到表中。是否可以像RDBMS中的JDBC连接一样一步完成。

推荐答案

将数据加载到Snowflake的绝对最快方法是从内部或外部舞台上的文件加载数据。句号。所有连接器都能够使用标准的INSERT命令插入数据,但这将不会执行得很好。也就是说,许多Snowflake驱动程序现在都透明地使用PUT/COPY命令通过内部Stage将大量数据加载到Snowflake。如果这就是您想要的,那么您可以利用PANAASwrite_pandas命令在单个命令中将数据从PANAAS DataFrame加载到Snowflake。在后台,它将为您执行PUT和COPY INTO。

https://docs.snowflake.com/en/user-guide/python-connector-api.html#label-python-connector-api-write-pandas

在任何驱动程序中,相对于INSERT命令,我强烈推荐使用此模式。我还建议在加载到Snowflake之后进行转换,而不是在加载之前。

这篇关于使用Python将数据写入雪花的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆