沈向洋领衔的IDEA研究院披露最新成果：多模态大模型开箱即用、AI科研助手2.0上线

11月22日，2023 IDEA大会在深圳举行，IDEA研究院创院理事长、美国国家工程院外籍院士沈向洋登台演讲，披露了诸多技术进展。“在大家都看到的问题里，找到大家都找不到的方法。”沈向洋在演讲中提及科研者的创新方向时谈到。他举例称，大模型做到今天，GPT4已经非常强大，但多模态仍然是一个没有解决的问题。随后，沈向洋展示出最新的计算机视觉融合大模型的研究成果：视觉提示（visual prompt）模型T-Rex。其团队表示，在真实应用场景中，许多罕见、复杂物体难以用文字充分描述，视觉提示的加入能够有效解决这一痛点，直观的视觉反馈与强交互性，也有助于提升检测的效率和精准度。T-Rex是一个开箱即用的模型，无需重新训练或微调，即可检测模型在训练阶段从未见过的物体。活动中，沈向洋还发布了T-Rex的模型实验室（playground），Interactive Visual Prompt（iVP），用户可试用“一图胜千言”的prompti