ImageNet 2012数据集转化为LMDB到底占多大空间?可否直接使用图片训练?

小弟尝试了两次转化过程,第一次想着,数据集本来就一百多G,转化后280G空间总是够的,结果硬盘直接搞满了,后来,网友说占480G,辛辛苦苦搞出500G出来,结果到现在,转化来一半,已占用空间392G,累觉不爱。
2016-08-23_00:08:06屏幕截图.jpg
已邀请:

爱在路上 - 想成为菜鸟中的战斗机

赞同来自:

LMDB确实占用很大

栏杆拍遍奈若何 - 路在脚下,也在远方

赞同来自:

谢谢回复,准备用它的部分,来搞一搞。全部的太大了,我的小本子受不了啊!

那年的鼬

赞同来自:

LMDB可以加快读取数据的过程,毕竟输入的数据是要经过组织的,可以看作空间换时间吧。我是这样想的,不知道对不对。

hunterlew

赞同来自:

楼主,你的训练集下下来后有缺失吗?是刚好1281167张吗?

mur11

赞同来自:

caffe的LMDB是支持编码的,使用JPEG编码的话,生成的LMDB并不是很大

moyan - 填坑填坑

赞同来自:

楼主,弱弱的问下LMDB能给个百度云的链接么?不甚感激!

要回复问题请先登录注册