HDF5数据转换太慢

在做人脸关键点检测数据准备过程中发现数据转换太慢。一次读取一万条标准数据然后在根据标注数据找图片转成hdf5格式,发现转换数据异常的慢,每分钟大概转换50张,我修改了每次读取标注数据的条数发现,大概读取6000条标注数据时候熟读是没分100张,2000千条是每分钟300张,读取1300条时候一分钟能转换完。
是的我的程序有问题吗,还是需要把标注文件拆分成很多小的 。
已邀请:

thehappysheep

赞同来自:

最后发现问题了。应该把所有文件都读取到数组后在再写入hdf5,不能读写一条。

要回复问题请先登录注册