The Era of 1-bit LLMs: All Large Language Models are in 1.58 Bits
https://thegenerality.com/agi/
https://arxiv.org/abs/2402.17764
The Era of 1-bit LLMs: All Large Language Models are in 1.58 Bits
https://thegenerality.com/agi/
https://arxiv.org/abs/2402.17764
1条答案
按热度按时间lnvxswe21#
根据我所了解的，该模型尚未发布。一旦发布，我相信它会出现在 https://github.com/microsoft/unilm/tree/master/bitnet 上。然后需要进行一些工作以获得 llama.cpp 支持。之后 Ollama 可以将其拉入其中。