微比恩 > 信息聚合 > 大模型out了,小模型(SLM)爆火,撕开99%企业市场?

大模型out了,小模型(SLM)爆火,撕开99%企业市场?

2024-08-07 16:32:58来源: 钛媒体

文 | AI鲸选社对于猎豹移动CEO傅盛来说,他今年最呼吁的一件事情,正在成为潮流——小模型逐渐成熟,成为企业落地商业化主力军,这令他十分开心。可能很多人会困惑,大模型(LLM)正火的当下,什么是小模型(SLM)?目前,市场通常将参数规模远少于GPT-4或Llama-13B的千亿大语言模型,一般参数只有1.5B、3B、7B的模型称为小大模型。要说小模型现在有多火,仅仅7月下半月,4家科技公司纷纷推出自己的小模型。Hugging Face 推出了高性能的小型语言模型 SmoLLM,包括 135M、360M 和 1.7B,能够直接在浏览器中运行;OpenAI 紧随其后发布了GPT-4o mini,直接让GPT-3.5 Turbo成为历史;Mistral AI 与英伟达合作推出了拥有 12 亿参数的 Mistral Nemo,多语言支持、128K 上下文,性能优于L3 8B和Gem

关注公众号
标签: 大模型