微软发布小语言模型AI Phi-2 性能优于Llama 2、Mistral 7B
微软研究院今天宣布发布其Phi-2小语言模型,这是一种文本到文本的人工智能程序,具有27亿个参数。Phi-2的性能可与其他更大的模型相媲美,包括Meta的Llama2-7B和Mistral-7B。想要在其之上构建产品的企业就不走运了。
只有27亿参数,性能却高25倍!微软发布Phi-2
12月13日,微软在官方网站正式发布了,27亿参数的大语言模型—Phi-2。Phi-2是基于微软的Phi-1.5开发成,可自动生成文本/代码、总结文本、数学推理等功能。值得一提的是,在多步推理测试任务中,例如,编码和数学,Phi-2的性能超过了700亿参数的Llama-2。
微软发布小型语言 AI 模型 Phi-2,性能优于 Llama 2、Mistral 7B
微软研究院当地时间周二宣布其Phi-2小型语言模型,这是一款文本到文本的人工智能程序,据X平台的一篇帖子称,它「足够小,可以在笔记本电脑或移动设备上运行」。Phi-2拥有27亿参数,性能堪比其他更大的模型,包括Meta的Llama2-7B和Mistral-7B。希望在其基础上构建产品的企业暂时无缘。
Hugging Face发布高度优化的Zephyr-7B迷你语言模型 媲美70亿参数Llama-2
在最新的人工智能实践中,HuggingFace推出了经过高度优化的Zephyr-7B迷你语言模型,该模型基于欧洲初创公司MistralAI的开源模型Mistral7B。通过采用蒸馏监督微调方法,该模型得以精细调整,该方法利用较大的“教师”模型的输出来训练较小的“学生”模型。这标志着HuggingFace在迷你语言模型领域的技术进步,为未来的人工智能发展奠定了坚实基础。