google-cloud-storage相关内容

使用 Apache Airflow 将文件从一个 Google Cloud Storage Bucket 复制到另一个

问题:我想将文件从 Google Cloud Storage Bucket 中的文件夹(例如 Bucket1 中的 Folder1)复制到另一个 Bucket(例如 Bucket2).我找不到任何用于 Google Cloud Storage 复制文件的 Airflow Operator. 解决方案 我刚刚在2小时前上传的contrib中发现了一个新的算子:https://github.c ..

使用 PHP 和 Ajax 将文件上传到 Google Cloud Storage Bucket

我正在处理一个 PHP 项目,在该项目中我需要将一个文件(由 HTML 表单提供)上传到 Google Cloud Storage Bucket.表单请求将作为 ajax 请求接收.我的文件上传成功,但是在存储桶中,它显示了一个临时文件,但我已经上传了一个图像文件. 这是我尝试过的: PHP 文件: if(isset($_FILES['file'])){$错误=数组();//使用谷歌 ..
发布时间:2022-01-25 20:28:38 PHP

从 Android 访问云存储

我一直找不到任何关于如何从 Android 应用程序使用 Cloud Storage 的具体文档. 我确实从 Google Cloud SDK 中发现了这个客户端库,但是遇到了很多很多问题,还没有让它工作. 我按照上面链接中的建议添加了以下代码: build.gradle: 编译组:'com.google.cloud',名称:'google-cloud-storage',版本: ..

PySpark + 谷歌云存储(wholeTextFiles)

我正在尝试使用 PySpark (Google Dataproc) 解析大约 100 万个 HTML 文件,并将相关字段写入压缩文件.每个 HTML 文件大约 200KB.因此,所有数据约为 200GB. 如果我使用数据的子集,下面的代码可以正常工作,但运行几个小时,然后在整个数据集上运行时崩溃.此外,工作节点未使用( 我相信系统会因从 GCS 中提取数据而窒息.有一个更好的方法吗?另外, ..

使用云功能将数据加载到大查询表中,它是附加到表中的,我需要它来替换

我有一个云功能,目前将获取一个 .csv 文件,该文件登陆云存储并将该文件加载到大查询表中.问题是它正在附加,我需要它来覆盖,我找到了一种使用命令行的方法 --replace 但不确定如何使用云函数在 .json 中执行此操作.以下是我当前的代码: exports.ToBigQuery_Stage =(事件,回调)=>{常量文件 = event.data;常量上下文 = event.contex ..

需要帮助了解 Firebase 存储 CDN

我正在构建一个有声读物应用,并将音频文件上传到 Firebase 存储.我的问题是我在旧金山和多伦多经历了不同的表现.我的印象是 Firebase 存储有内置的 CDN.如果是这样,我需要在某处启用它吗?如果没有,如何将 GCP CDN 添加到 Firebase Auth 后面的 Firebase 存储文件中?? 检查我的 Firebase 存储文件所在的域 storage.googleap ..

授权的 GAE 应用程序必须与数据库实例位于同一区域 |谷歌应用引擎

无法连接云端sql |谷歌应用引擎 |授权的 GAE 应用程序必须与数据库实例错误位于同一区域. 我确实阅读了本教程https://developers.google.com/appengine/docs/php/cloud-sql/ 我试图将我的 appID 提供给 Storage>>cloudsql>>Authorized App Engine Applications,但它显示了 ..
发布时间:2022-01-25 20:26:48 PHP

.\key.p12:打开失败:ENOENT(没有这样的文件或目录)

在我的 android 应用程序中,我正在访问 Google 云存储.我已经生成了私钥 xxxxxxxkey.p12.我已将我的密钥文件放在 assets 文件夹中.但是在运行项目时它没有打开 key.p12 文件.我试过把它放在assets文件夹外面,还是没有结果. httpTransport = AndroidHttp.newCompatibleTransport();AssetManag ..

将照片从 Android 应用上传到 Google Cloud Storage/App Engine - 非法字符“_"

我在将照片从我的 Android 应用程序上传到 GCS 时遇到问题.我可以上传文本文件,但不能上传照片.我尝试了各种 mime 类型以及不同的 Base64 编码方法(decodeBase64、encodeBase64URLSafeString 等...) 我觉得我真的很亲近. 这是我收到的错误消息: com.google.appengine.repackaged.org.co ..
发布时间:2022-01-25 20:25:53 Java开发

使用 javascript 将请求批量上传到 Google Cloud Storage

我正在尝试使用 javascript 在批量请求中将多张图片上传到谷歌云存储.我正在使用 https://developers.google.com/storage/docs/json_api/v1/how-tos/batch#example 作为参考. 我有一个输入文件,用户可以在其中选择多个文件,还有一个“上传"btn 可以像这样上传到 GCS: ..