amazon-glacier相关内容

节点读取指定块大小的文件

目标:将大文件上传到 AWS Glacier,而不会将整个文件保存在内存中. 我目前正在使用 fs.readFileSync() 上传到冰川,一切正常.但是,我需要处理大于 4GB 的文件,并且我想并行上传多个块.这意味着转向分段上传.我可以选择块大小,但冰川需要每个块的大小相同(最后一个除外) 这个线程建议我可以在阅读流,但我实际上并不能保证得到它. 关于如何在不将整个文件读入 ..
发布时间:2022-01-09 22:56:58 其他开发

是否可以将 EC2 卷移动到 Amazon Glacier 而无需下载和上传?

我正在努力降低 AWS 系统的成本.我想将一些我很少使用的卷移到 Amazon Glacier,但除了下载卷并上传到 Glacier 之外,我没有找到任何可以在 AWS 内部执行此操作的方法,这听起来很糟糕. 我想知道,是否可以自动执行此操作?直接从 EC2 控制台将一些 EC2 卷分配给 Glacier? 谢谢 解决方案 EBS 卷无法复制或迁移到 Amazon Glacie ..
发布时间:2021-12-21 11:05:48 其他开发

将 Glacier 永久恢复到 S3

我想知道是否有一种简单的方法可以将 Glacier 对象永久恢复到 S3.似乎您可以在恢复到 S3 时提供的一定时间内恢复 Glacier 对象.例如,我们现在将数千个文件还原到 S3,这些文件将在 90 天内返回 Glacier,但我们不希望它们返回 Glacier. 解决方案 为了澄清一个技术问题,您的文件不会“返回"90 天后的 Glacier -- 因为它们仍在 Glacier 中 ..
发布时间:2021-12-15 20:05:04 其他开发

如何在 AWS S3 中发送恢复对象事件的通知?

我正在从 AWS Glacier 下载存档文件.所以我需要首先将对象从冰川恢复到 s3.由于我使用的是“加急"模式,完成恢复过程需要几分钟.然后只有我可以下载文件. 我开发了一个反应应用程序来做这些事情.有一个“下载"按钮将执行恢复过程.然后我需要根据“恢复对象事件"的完成情况向用户(不是特定的人)发送电子邮件通知. 我指的是 SNS 通知,它说明了将通知发送到特定电子邮件的方式.但就 ..

列出具有特定存储类的 S3 存储桶对象

从 Glacier 获取对象非常耗时,因此我决定改用 S3 IA 存储类.我需要列出我的存储桶中具有 Glacier 存储类的所有对象(我通过 LifeCycle 策略对其进行了配置)并将其更改为 S3 IA. 是否有任何脚本或工具? 解决方案 您可以使用 列表对象 list-objects 将返回 StorageClass,在您的情况下,您要过滤 GLACIER 的值 a ..
发布时间:2021-10-27 18:58:26 其他开发

访问job.get_output('body')中的流

示例代码 import boto3冰川= boto3.resource('冰川')job = glacier.Job(accountID,vaultlist [0],id = joblist [0])r = job.get_output()打印(r0 ['body']) 该打印仅在0xsnip处产生botocore.response.StreamingBody r0 ['body'] ..
发布时间:2021-04-16 18:55:42 Python

如何在PHP中为大型文件计算sha256

我想请教您有关如何在PHP中计算大文件的sha256的帮助。当前,我使用Amazon Glacier来存储旧文件,并使用它们的API上传档案。最初,我只是使用无法访问MB大小的图像的小文件。当我尝试上传超过1MB的内容时,API响应说我给他们的校验和与他们计算的结果不同。 这是我上传的代码文件: //使用文件路径 $ image = //图像路径获取sha256; $ sha2 ..
发布时间:2020-06-05 18:32:20 PHP

异步亚马逊冰川下载

我想使用线程池异步下载多个冰川文件。我当前的方法使用High Level API进行Glacier下载,但是每个线程都在等待下载方法,直到下载作业完成。以下是所有代码正在等待的代码 ArchiveTransferManager manager = new ArchiveTransferManager(Amazon.RegionEndpoint.USEast1); DownloadOpt ..
发布时间:2020-06-05 18:32:17 C#/.NET

一段时间后是否可以自动将对象从S3存储桶移动到另一个存储桶?

我有一个S3存储桶,它可以非常快速地积累对象,并且我想自动将早于一周的对象移动到另一个存储桶中。是否可以通过一项政策来做到这一点,如果可以,那么该政策将是什么样子。 如果无法转移到另一个S3存储桶,是否有其他自动机制可以将它们归档到冰川? 解决方案 是的,您可以从S3自动将其存档到Glacier。 您可以通过在亚马逊控制台。 http://aws.amazon.com/b ..
发布时间:2020-06-05 18:32:12 其他开发

PHP AWS API原始请求到PUT存储桶生命周期

我正在创建一个网站,该网站具有一项功能,如果用户删除将要存档的图像/视频,我正在使用AWS S3进行存储,并且删除后想在Glacier上移动它,我不想使用AWS开发工具包,因此我正在使用PHP cURL创建Raw请求,从该链接我试图将存储桶生命周期放在对象 http://docs.aws.amazon.com/AmazonS3/latest/API/RESTBucketPUTlifecycle.h ..
发布时间:2020-06-05 18:32:10 PHP

如何在启用保管库锁定的情况下将对象从Amazon S3移动到Glacier?

我正在寻找一种在启用保管库锁定的情况下将Amazon S3对象移动到Glacier的解决方案(如此处所述 https://aws.amazon.com/blogs/aws/glacier-vault-lock/ )。如果可能的话,我想使用Amazon内置的工具(生命周期管理或其他工具)。 我找不到任何说明或选项。 S3似乎只允许将对象移动到Glacier存储类。但这不能提供数据完整性,也不能 ..
发布时间:2020-06-05 18:32:06 其他开发

AWS S3 Glacier-以编程方式启动还原

我一直在编写一个使用s3进行存储并使用冰川进行备份的Web应用程序。因此,我设置了生命周期策略来对其进行存档。现在,我想编写一个列出存档文件的Web应用程序,用户应该能够从中启动还原,然后在还原完成后收到一封电子邮件。 现在我遇到的麻烦是我找不到可以发出的initialRestore的php sdk命令。然后,如果还原完成时通知SNS,SNS将JSON推送到SQS上,我将对SQS进行轮询,并 ..
发布时间:2020-06-05 18:31:59 其他开发

使用API​​以编程方式在Amazon S3和Glacier之间移动文件,反之亦然

我正在使用Amazon的S3和冰川服务创建基于PHP的Web应用程序。 现在,我想为网站用户提供一个功能,使他们可以选择任何文件并将其存档(意味着将文件从S3移至Glacier)和取消存档(意味着将文件从Glacier移至S3)。 我已经进行了一些研究,但没有发现任何内容。使用亚马逊API的可能方法。 问题 如何使用API​​在S3和冰川之间移动文件? 解决方案 您 ..
发布时间:2020-06-05 18:31:57 其他开发

节点以指定的块大小读取文件

目标:将大型文件上传到AWS Glacier而不将整个文件保存在内存中。 我目前正在使用fs.readFileSync()和一切正常。但是,我需要处理大于4GB的文件,并且希望并行上传多个块。这意味着转移到分段上传。 我可以选择块的大小,但是冰川需要每个块都具有相同的大小(最后一个除外) 此线程建议我可以在读取流上设置块大小,但实际上并不能保证获得它。 关于如何获取一致部分而无 ..
发布时间:2020-06-05 18:31:53 其他开发

使用生命周期存档规则时,AWS如何将S3对象传输到Glacier存档?

Amazon Web Services(AWS)S3允许您自动将对象从S3传输/存档到Glacier。 我找不到任何人解释的 如何 进行转移。 S3对象归档到哪个冰川金库?生命周期策略是否在其创建的Glacier档案中设置了任何形式的描述?会为每个S3对象创建一个存档吗? 解决方案 问:我可以使用亚马逊吗? Glacier API可以访问我已归档到Amazon Glacie ..
发布时间:2020-06-05 18:31:51 其他开发

是否可以将EC2卷迁移到Amazon Glacier而无需下载和上传呢?

我正在尝试降低AWS系统的成本。我曾想将一些我很少使用的卷移到Amazon Glacier,但是除了下载该卷并上传到Glacier之外,我在AWS内部找不到任何方法。 我想知道,是否可以自动执行此操作?直接从EC2控制台分配一些EC2卷到冰川吗? 谢谢 解决方案 EBS卷无法复制或迁移到Amazon Glacier。 EBS快照即使存储在Amazon S3中,也无法移动到 ..
发布时间:2020-06-04 00:40:06 其他开发

亚马逊AWS Athena S3和冰川混合桶

带有S3 Glacier的Amazon Athena日志分析服务 S3中有PB级的数据。我们是 https://www.pubnub.com/ ,我们将使用情况数据存储在网络的S3中以进行计费目的。我们在S3存储桶中存储了制表符分隔的日志文件。雅典娜给我们一个 HIVE_CURSOR_ERROR 失败。 我们的S3存储桶设置为自动6个月后推送至AWS Glacier。除Glacier备 ..