复旦 NLP 团队的 MOSS 大语言模型
开源,增加「搜索引擎、计算器、解方程、文生图」等插件功能,可以在线体验,支持本地部署。
MOSS是一个支持中英双语和多种插件的开源对话语言模型,moss-moon系列模型具有160亿参数,在FP16精度下可在单张A100/A800或两张3090显卡运行,在INT4/8精度下可在单张3090显卡运行(但该精度未开放)。MOSS基座语言模型在约七千亿中英文以及代码单词上预训练得到,后续经过对话指令微调、插件增强学习和
人类
偏好训练具备多轮对话能力及使用多种插件的能力。
项目地址:
网页链接