mongodb 如何在Python中从一个大的Json文件中创建bucket?

camsedfj  于 2023-08-04  发布在  Go
关注(0)|答案(1)|浏览(142)

我有以下本地JSON文件(大约90 MB):
x1c 0d1x的数据
为了使数据可访问,我希望创建较小的JSON文件,其中包含完全相同的数据,但每次只包含Readings.SensorData中的100个数组条目。所以一个包含前100个读数的文件,然后一个包含101-200个读数的文件,等等……我知道ijson库,但我不知道如何以最有效的内存方式实现这一点。
编辑:只是要注意,我知道如何用标准JSON库来做这件事,但因为它是一个大文件,我希望能够以一种不会完全停止的方式来做这件事。

fdbelqdn

fdbelqdn1#

在Python中使用dict.items()
你需要json,用python打包
使用json.loads()特性,它将产生一个python字典。

相关问题