将CSV写入Google云存储 [英] Write csv to google cloud storage

问题描述

我想了解如何将多行CSV文件写入Google云存储。我只是没有理解documentation

靠近此处： Unable to read csv file uploaded on google cloud storage bucket

示例：

from google.cloud import storage
from oauth2client.client import GoogleCredentials
import os

os.environ['GOOGLE_APPLICATION_CREDENTIALS'] = "<pathtomycredentials>"

a=[1,2,3]

b=['a','b','c']

storage_client = storage.Client()
bucket = storage_client.get_bucket("<mybucketname>")

blob=bucket.blob("Hummingbirds/trainingdata.csv")

for eachrow in range(3):
    blob.upload_from_string(str(a[eachrow]) + "," + str(b[eachrow]))

这会让您在Google云存储上获得一行

3,c

显然，它每次都打开一个新文件并写入该行。

好的，添加一个新行delim怎么样？

for eachrow in range(3):
    blob.upload_from_string(str(a[eachrow]) + "," + str(b[eachrow]) + "
")

这将添加换行符，但再次从头开始写入。

谁能说明一下这种方法是什么？我可以将所有行合并到一个字符串中，也可以编写一个临时文件，但这似乎非常难看。

可能是以文件形式打开？

推荐答案

blob.upload_from_string(data)方法创建一个新对象，其内容正好是字符串data的内容。它覆盖现有对象，而不是追加。

最简单的解决方案是将整个CSV写入临时文件，然后使用blob.upload_from_filename(filename)函数将该文件上载到GCS。

这篇关于将CSV写入Google云存储的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！