压缩LMDB文件 [英] Compressing LMDB files

问题描述

我想知道是否有人试图对他们的LMDB文件使用压缩技术？通常，lmdb文件通常不使用任何压缩。我想知道是否有人成功地存储数据在lmdb使用jpeg压缩在lmdb上，然后用于caffe。我需要这个，因为我在一个开发板上工作，存储空间非常有限。

解决方案

div>

Caffe还支持支持压缩的HDF5。如果你的数据集是smth像mnist - 它可能是一个不错的选择。

I am wondering if anyone has tried using compression techniques for their LMDB files? Typically, lmdb files typically do not use any compression. I am wondering if anyone has successfully stored data in an lmdb using jpeg compression on lmdb and then used it for caffe. I need this because I am working on a developer board with very limited storage space. If so, can you please provide steps/code to do this?

thanks

解决方案

Caffe also supports HDF5 which supports compression. If your dataset is smth like mnist - it may be a good choice.

这篇关于压缩LMDB文件的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！