问下simnet_bow在进行短文本匹配finetune时,自己的词典数据显示不在vocab中,已被drop了,处于无训练状态
$x_1^c_0d_1^x$
b4qexyjb1#
你好!以上现象属于正常现象,当原始文本切完词,单词不在simnet_bow词汇表中,会被抛弃。
hm2xizp92#
@Steffy-zxf 但基本处于无训练的状态,这个是我用默认数据集finetune的,帮忙看下是什么原因
2条答案
按热度按时间b4qexyjb1#
你好!以上现象属于正常现象,当原始文本切完词,单词不在simnet_bow词汇表中,会被抛弃。
hm2xizp92#
你好!以上现象属于正常现象,当原始文本切完词,单词不在simnet_bow词汇表中,会被抛弃。
@Steffy-zxf 但基本处于无训练的状态,这个是我用默认数据集finetune的,帮忙看下是什么原因