微比恩 > 信息聚合 > 原来 AI 也需要有人哄,一句话让 GPT-3 准确率暴涨 61%

原来 AI 也需要有人哄,一句话让 GPT-3 准确率暴涨 61%

2022-05-26 14:34:52来源: IT之家

一觉醒来,机器学习社区炸了锅。因为最新研究发现,只要对 GPT-3 说一句“让我们一步一步地思考”,就能让它正确回答出以前不会的问题。比如下面这个例子:16 个球中有一半是高尔夫球,这些高尔夫球中有一半是蓝色的,一共有几个蓝色的高尔夫球?(问题不难,但要注意这是零样本学习,也就是说 AI 训练阶段从没见过同类问题。)如果要求 GPT-3 直接写出“答案是几”,它会给出错误答案:8。但加上让我们一步一步地思考这句“咒语”后,GPT-3 就会先输出思考的步骤,最后给出正确答案:4!而且这并不是巧合,研究团队在论文中做了充分的验证。上面的问题出自经典的 MutiArith 数据集,专门考验语言模型做数学题的能力,GPT-3 本来在零样本场景下准确率仅有 17%。这篇论文中总结了 9 个最有效的提示词,其中换着花样让 GPT-3 逐步思考的前 6 个都让准确率暴涨到 70% 以上。甚至一句最简单的“Let’s think”(让我们想一想

关注公众号
标签: AI