36氪获悉,中信建投研报表示,零一万物正式对外发布新旗舰模型——Yi-Lightning。Yi-Lightning 的训练过程中,采用MoE混合专家模型架构,同时改进了单阶段训练,使用了多阶段的训练模式,并且采用了混合注意力机制。在保持模型性能接近最优的同时,尽可能减少激活参数的数量以降低训推成本,提高推理速度。在大模型竞技场上,Yi-Lightning性能直冲总榜单并列第6,数学分榜并列第3,代码等其它分榜也名列前茅。
中信建投:零一万物发布Yi-Lightning,国产大模型迭代加速
2024-10-25 07:57:29来源: 36氪
关注公众号
赞
你的鼓励是对作者的最大支持
- OPPO发布旗舰产品Find X8系列2024-10-25 08:02:15
- 租客变房东,上海二手房市场持续升温2024-10-25 08:03:08
- 分红意愿提升,多家上市公司拟三季报分红2024-10-25 08:07:38
- 国泰君安:中国制造具备竞争优势,产品出海和产能出海共同发力2024-10-25 08:08:39
- 港股IPO热度回升,大型IPO、“A+H”股接连涌现2024-10-25 08:10:59
- 银河证券:三个方向的并购重组专题投资较为值得关注2024-10-25 08:11:33
- “点刹”无碍涨势,机构看好白银牛市行情2024-10-25 08:15:56
- 中信证券:物业服务行业的类公用事业属性特征和头部化趋势明显2024-10-25 08:17:32
- 产量飙升,淡水河谷第三季度盈利超出预期2024-10-25 08:19:30
- 中信证券:2025年社融全年同比增速可能在8.0%附近2024-10-25 08:20:15
- 1联想宣布新人事任命:前戴尔高管担任 ISG 总裁
- 2中国移动官旗 4999 元起,苹果 iPhone 16 / Pro 全系列立减千元
- 3教官体罚14岁女孩涉事公司注销 体罚14岁女孩致死涉事公司注销
- 4上海国投公司等成立私募基金管理公司 注册资本1000万
- 5腾讯回应“2 万多名员工将搬到宝安滨海数字中心”:没有的事
- 6恒大恒驰汽车上海公司2.9亿股权被冻结 恒大新能源汽车所持2.9亿股权被冻结
- 7谷歌 Tensor G5 芯片揭秘:1+5+2 八核 CPU、新 GPU 支持光追、AI 性能提升 14%
- 8奈雪的茶欠税31万被公告
- 9中信在福建成立科技产业投资公司 注册资本1000万
- 10教育优惠版 3359 元:苹果 iPad mini(A17 Pro)自营直降新低