PyTorch ' Torch .无grad'与' Torch .推断模式'

axr492tv  于 2022-12-23  发布在  其他
关注(0)|答案(1)|浏览(293)

PyTorch从v1.9开始有了新的功能torch.inference_mode,即“analogous totorch.no_grad ...在此模式下运行的代码通过禁用视图跟踪和版本计数器碰撞获得了更好的性能。”
如果我只是在测试时评估模型(即非训练),是否存在torch.no_grad优于torch.inference_mode的情况?我计划用后者替换前者的每个示例,并希望使用运行时错误作为防护(也就是说,我相信任何问题都会显示为运行时错误,如果它没有显示为运行时错误,那么我认为使用torch.inference_mode确实更可取)。
有关开发推理模式的原因的更多详细信息,请参见the PyTorch Developer Podcast

k5hmc34c

k5hmc34c1#

是的,在推理模式不抛出运行时错误的所有情况下,torch.inference_mode确实优于torch.no_grad

相关问题