微软推出“小型”AI 语言模型 Phi-3 Mini,接受 AI 输出训练 – IT 专业人士 – 新闻

微软发布了 Phi-3 Mini,这是一种小型语言模型,可根据其他语言模型编写的儿童书籍进行训练。 对AI模型的理解应该大致符合OpenAI的GPT 3.5。

在撰写本文时,Phi-3 Mini 似乎尚未上线,但 微软已将相关论文发布到网上。 这是一个拥有 38 亿个参数的模型。 这是相对较小的,优点是它足够轻,可以在笔记本电脑和智能手机上运行。 培训日期是 根据 Microsoft 在 The Verge 的一篇文章中的说法 部分来自网络,部分由人工智能聊天机器人创建的“儿童读物”,只有 3000 个最常用的单词。

其目的是证明,通过使用正确的训练数据,可以用更少的参数构建同样强大的模型,并且根据 Microsoft 的说法,Phi-3 Mini 可以与 GPT 3.5 和 Mixtral 竞争。 后者有 450 亿个参数。

Mini 版本是微软计划发布的三款 Phi-3 型号系列中的第一款。 此外,Phi-3 Small 拥有 70 亿个参数,Phi-3 Medium 拥有 140 亿个参数。 目前尚不清楚他们何时被释放。 微软将其 Phi 模型放在 HuggingFace 上,但它们也可以通过微软自己的云平台 Azure 和桌面应用程序 Ollama 使用。

目前尚不清楚微软对 Phi 有何计划。 它通常将 OpenAI 的 GPT 模型用于其 CoPilot 产品,并针对 Microsoft 集成该模型的服务进行自我训练。

微软 Phi 3 迷你

#微软推出小型AI #语言模型 #Phi3 #Mini接受 #输出训练 #专业人士 #新闻
1713887132
2024-04-23 13:04:02

Leave a Reply

Your email address will not be published. Required fields are marked *

近期新闻​

编辑精选​