微比恩 > 信息聚合 > 小米大模型升级第二代:MiLM2 实现云边端结合,能力平均提升超 45%

小米大模型升级第二代:MiLM2 实现云边端结合,能力平均提升超 45%

2024-11-12 18:41:20来源: IT之家

IT之家 11 月 12 日消息,小米公司 MiLM 大模型在去年 8 月首度现身 C-Eval、CMMLU 大模型评测榜单,并在今年 5 月通过大模型备案,相关模型逐步应用于小米汽车、手机、智能家居等产品中。今日,小米官方宣布大模型已经实现了从一代到二代(MiLM2)的升级迭代。据介绍,此次迭代不仅扩充了训练数据的规模、提升了数据的品质,更在训练策略与微调机制上进行了深入打磨,增强了技术实力并全面升级了配套的部署技术。IT之家从小米公告获悉,小米第二代大语言模型的几个主要升级是:第二代大语言模型丰富了模型的参数矩阵,参数规模同时向下和向上扩充,实现了云边端结合,参数尺寸最小为 0.3B,最大为 30B;第二代大语言模型在 10 大能力维度上,相比于第一代模型平均提升超过 45%,其中指令跟随、翻译、闲聊等对于智能助手而言比较关键的能力上,效果处于业界前列;第二代大语言模型在端侧

关注公众号