大模型驾车哪家强？普渡研究给指南：GPT-4 真行啊

图片地址：https://img.ithome.com/newsuploadfiles/2024/2/299a3e58-534c-4bdd-9bf3-e7e527da41af.gif

现在一句口令，就能指挥汽车了。比如说声“我开会要迟到了”“我不想让我朋友等太久”等等，车就能理解，并且自动加速起来。如果这次行程有不满意的，只需要给汽车提供反馈建议：“要在充分保障安全的前提下”，汽车的自动驾驶行为就会在下次行程中进行自我修正。这是来自普渡大学数字孪生实验室最新研究 —— 让大语言模型部署在自动驾驶实车上，在多个交通场景，比如停车场、十字路口和高速上理解乘客的各种个性化指令，构建他们的数字孪生。最终在众多大模型的实验中，GPT-4 脱颖而出。基于 LLM 的自动驾驶系统而这背后的实现，主要来自一个框架 Talk2Drive。这个框架主要有三个特点：1、它将人类口头命令转换为文本指令，然后由云端的大模型来处理。在此过程中会用到一些语音识别的开源 API，比如 Whisper，准确捕获口令并翻译成文本。云上的大模型结合天气、交通状况和当地交通规则等信息，生成上下文驾驶数据。2、大模型生成特定的自动驾驶代码，随后发送回