可以使用s3 java sdk通过流写入s3吗? [英] Is it possible to write to s3 via a stream using s3 java sdk

查看:21
本文介绍了可以使用s3 java sdk通过流写入s3吗?的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

通常,当文件必须上载到S3时,必须先将其写入磁盘,然后才能使用TransferManager API之类的东西上载到云中。如果上载没有按时完成(应用程序关闭并在不同的服务器上重新启动等),这会导致数据丢失。因此,我想知道是否可以直接通过网络将所需的云位置作为接收器写入到流中。

JAVA

您没有说明您使用的是什么语言,但我将根据您的大小写假定推荐答案。在这种情况下,答案是肯定的:TransferManager有一个接受PutObjectRequest参数的upload()方法,您可以围绕流构造该对象。

但是,有两个重要的警告。第一个在PutObjectRequest的文档中:

直接从输入流上传时,必须先指定内容长度,然后才能将数据上传到Amazon S3

所以在开始之前,您必须知道要上传多少数据。如果您正在接收来自Web的上传,并且有一个Content-Length头,那么您可以从它获得大小。如果您正在读取任意长度的数据流,则必须首先将其写入文件(或者SDK会这样做)。

第二个警告是,这实际上并不能防止数据丢失:您的程序仍然可能在读取数据的过程中崩溃。它阻止的一件事是在将数据存储在S3中之前向用户返回成功代码,但您无论如何都可以使用文件执行此操作。

这篇关于可以使用s3 java sdk通过流写入s3吗?的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆