托管和访问在Amazon EC2,S3的HDF5文件,及/或EBS [英] Hosting and Accessing an HDF5 file on Amazon EC2, S3, and/or EBS

查看:286
本文介绍了托管和访问在Amazon EC2,S3的HDF5文件,及/或EBS的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

我在寻找在网上下一个相当大的HDF5文件,并期待在Amazon S3和/或EBS来存储它,并可能利用后端处理的EC2实例或两个可能的地方。我在寻找它如何能够或已经做过实际的想法,如果可能的话,链接到一个实际的例子。我认为它可以在有人会访问一些其他的嵌入式数据存储平面文件的方式来完成,但是要避免重新发明轮子,如果有可用的切实可行的建议。

I'm looking to place a rather large HDF5 file online and am looking at Amazon S3 and/or EBS as a possible place to store it and possibly leverage an EC2 instance or two for back-end processing. I'm looking for practical ideas of how it can or has been done before and, if possible, a link to an actual example. I think it can be done in the same way that someone would access a flat-file on some other embedded data store, but would like to avoid reinventing the wheel if there's practical insight available.

推荐答案

你可以在本地或在EC2上使用FUSE挂载S3:

you can just mount your S3 locally or on EC2 with FUSE:

HTTP://$c$c.google.com/p/ s3fs /维基/ FuseOverAmazon

在这一点上,你可以使用所有常用的库来访问HDF5。

at that point you can use all the usual libraries to access HDF5.

这篇关于托管和访问在Amazon EC2,S3的HDF5文件,及/或EBS的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆