嵌入模型返回的结果质量现在比之前的版本差很多。
Linux
Nvidia
Intel
0.1.48
beq87vna1#
是的,我也注意到了,对于不同的模型,奥拉马会给出一些无意义的回应。
ggazkfy82#
Until which version was the quality good? which embedding model? Did you use langchain-python-rag-privategpt?
vx6bjr1n3#
我们还注意到在0.1.38和0.2.1之间的质量下降。我们在这两个版本之间运行了与我们的评估测试用例的比较,并发现了以下情况:
参考:https://gitlab.com/peerdb/llm/-/merge_requests/34
3条答案
按热度按时间beq87vna1#
是的,我也注意到了,对于不同的模型,奥拉马会给出一些无意义的回应。
ggazkfy82#
Until which version was the quality good? which embedding model? Did you use langchain-python-rag-privategpt?
vx6bjr1n3#
我们还注意到在0.1.38和0.2.1之间的质量下降。我们在这两个版本之间运行了与我们的评估测试用例的比较,并发现了以下情况:
参考:https://gitlab.com/peerdb/llm/-/merge_requests/34