命名实体标注器无法识别用作主题标签的实体。例如,I like Jeremy 可以正确地将Jeremy识别为命名实体。然而,I like #Jeremy 不会。这是预期的行为吗?
I like Jeremy
I like #Jeremy
ndh0cuux1#
该系统的训练数据并未针对社交媒体数据进行过训练,因此它从未见过一个以#开头的实体。我认为你提出了一个很好的观点,我们需要考虑如何改进对社交媒体文本的处理。
velaa5lx2#
我们可以添加一些处理以#开头的标记,并为命名实体识别标注去除#的功能。
2条答案
按热度按时间ndh0cuux1#
该系统的训练数据并未针对社交媒体数据进行过训练,因此它从未见过一个以#开头的实体。我认为你提出了一个很好的观点,我们需要考虑如何改进对社交媒体文本的处理。
velaa5lx2#
我们可以添加一些处理以#开头的标记,并为命名实体识别标注去除#的功能。