如何高效处理keras批量读取多个hdf5文件训练难题?
- 内容介绍
- 文章标签
- 相关推荐
本文共计1743个文字,预计阅读时间需要7分钟。
使用Keras进行大数据训练,为加速训练过程,需要提前制作训练集。由于HDF5的特性,所有数据需一次性读入内存才能保存。因此,我将数据分批读取,分为两个以HDF5进行存储的批次。
用keras进行大数据训练,为了加快训练,需要提前制作训练集。
由于HDF5的特性,所有数据需要一次性读入到内存中,才能保存。
为此,我采用分批次分为2个以上HDF5进行存储。
本文共计1743个文字,预计阅读时间需要7分钟。
使用Keras进行大数据训练,为加速训练过程,需要提前制作训练集。由于HDF5的特性,所有数据需一次性读入内存才能保存。因此,我将数据分批读取,分为两个以HDF5进行存储的批次。
用keras进行大数据训练,为了加快训练,需要提前制作训练集。
由于HDF5的特性,所有数据需要一次性读入到内存中,才能保存。
为此,我采用分批次分为2个以上HDF5进行存储。

