微软推出“小型”AI 语言模型 Phi-3 Mini,接受 AI 输出训练 – IT 专业人士 – 新闻

微软发布了 Phi-3 Mini,这是一种小型语言模型,可根据其他语言模型编写的儿童书籍进行训练。 对AI模型的理解应该大致符合OpenAI的GPT 3.5。 在撰写本文时,Phi-3 Mini 似乎尚未上线,但 微软已将相关论文发布到网上。 这是一个拥有 38 亿个参数的模型。 这是相对较小的,优点是它足够轻,可以在笔记本电脑和智能手机上运行。 培训日期是 根据 Microsoft 在 The Verge 的一篇文章中的说法 部分来自网络,部分由人工智能聊天机器人创建的“儿童读物”,只有 3000 个最常用的单词。 其目的是证明,通过使用正确的训练数据,可以用更少的参数构建同样强大的模型,并且根据 Microsoft 的说法,Phi-3 Mini 可以与 GPT 3.5 和 Mixtral 竞争。 后者有 450 亿个参数。 Mini 版本是微软计划发布的三款 Phi-3 型号系列中的第一款。 此外,Phi-3 Small 拥有 70 亿个参数,Phi-3 Medium 拥有 140 亿个参数。 目前尚不清楚他们何时被释放。 微软将其 Phi 模型放在 HuggingFace 上,但它们也可以通过微软自己的云平台 […]