谷歌 Gemini 大逆转？斯坦福 Meta 华人证明其推理性能强于 GPT-3.5

图片地址：https://img.ithome.com/newsuploadfiles/2024/1/406adcc8-d1b9-4307-a315-0707fe4ebadf.jpg?x-bce-process=image/format,f_auto

新智元报道 编辑：编辑部【新智元导读】谷歌放出的 Gemini，在对标 GPT 的道路上似乎一直处于劣势，Gemini 真的比 GPT-4 弱吗？最近，斯坦福和 Meta 的学者发文为 Gemini 正名。Gemini 的推理能力，真的比 GPT-4 弱吗？此前，谷歌憋出的重磅复仇神器 Gemini Pro，被发现在常识推理任务中落后于 OpenAI 的 GPT 模型。之后又有 CMU 发布的论文和实验，证明 Gemini Pro 的很多能力都略微落后于 GPT-3.5 Turbo。不过最近，斯坦福和 Meta 的学者为 Gemini 洗清了这一「冤屈」。他们发现，这种基于有限数据集（HellaSWAG）的评估，并不能完全捕捉到 Gemini 真正的常识推理潜力。论文地址：https://arxiv.org/ abs / 2312.17661而在新测试集中，Gemini 的推理能力比