使用python操作lmdb对数据读取的实例

由于c++速度快，所以一般写入数据我调用c++借口，而读取数据使用c++也行，但有时候Python在某方面方便，所以通过使用python借口仅仅对lmdb文件读取，处理数据是图片HDF5和LMDB都是Cafffe中常用的数据库。相对来说，HDF5的读写格式简单；LMDB采用内存-映射文件，所以拥有非常好的I/O性能，而且对于大型数据库来说，HDF5的文件常常整个写入内存。所以HDF5的文件大小就受限于内存大小，当然也可以通过文件分割来解决问题，但其I/O性能就不如LMDB的页缓存策略了。MNIST手写数字字符识别实验在deep learning 中经常用到，这里使用Python来获取lmdb格式MNIST数据集中的图片并显示出来首先确认你安装了lmdb和Caffe的python包。LMDB采用键值对的存储格式，key就是字符形式的ID，value是Caffe中Datum类的序列化形式。