python—将每个数据文件拆分为较小的批,以获得较大的数据集

bwleehnv  于 2021-09-08  发布在  Java
关注(0)|答案(0)|浏览(196)

我目前有一个包含数千个文件的大型数据集。对于每个文件,我将其预处理为两个numpy数组x和y。
x数据具有形状:[n个窗口,128,64,3]。y数据具有形状:[n个窗口,128,4]
我在预处理期间使用了滑动窗口,因此每个文件的n个窗口是不同的。每个文件的n个窗口大约为1000个,因此我需要将其拆分为32个批量大小。
我曾尝试使用keras.sequence创建一个生成器,但我受到了限制,因为我不相信我可以使用此方法将每个文件进一步拆分为更小的批。
如果有人能提供解决方案,我们将不胜感激。非常感谢。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题