unilm [LayoutReader] 评估结果与阅读说明不一致

wydwbb8l  于 2个月前  发布在  其他
关注(0)|答案(1)|浏览(36)

描述

我正在使用的模型(LayoutReader):
感谢您的出色工作!
根据readme描述,结合以下三点:1)默认的"4.解码"代码;2)提供的预训练模型;3)阅读库测试集(约50k),我得到的平均BLEU分数约为88.6,与readme中声称的98.2不一致。
如果能提供一些提示就更好了,非常感谢!

fxnxkyjh

fxnxkyjh1#

你好!
感谢您对我们工作的兴趣!我们很遗憾地看到您无法产生我们预期的结果。在我们论文中报告的所有结果都是准确的,与实验告诉我们的相同。我们在提交之前仔细报告了这些数字,并进行了双重检查。因此,我们假设可能存在一些关于运行环境或论证设置的问题。请检查您的实验细节,看看问题是否仍然存在。

相关问题