云知声推出山海多模态大模型：实时生成文本、音频和图像

图片地址：https://img.ithome.com/newsuploadfiles/2024/8/365bc0f5-a4a6-4a91-a3b5-1204ede42c3b.jpg?x-bce-process=image/format,f_auto

IT之家 8 月 26 日消息，云知声于 23 日宣布推出山海多模态大模型。通过整合跨模态信息，山海多模态大模型能够接收文本、音频、图像等多种形式作为输入，并实时生成文本、音频和图像的任意组合输出。▲ 云知声山海助手微信小程序IT之家获悉，山海多模态大模型有如下特点：实时秒回，自由插话：与现实对话中人类的响应时间相似；支持对话随时打断，用户可在对话中任意插话感知情绪，表达情绪：通过语音文本判断用户情绪，还能捕捉用户语音的语气、节奏和音调等微妙变化，感知对方情绪状态音色自由切换：根据用户的个性化需求，自由切换音色；学习用户的音色、风格，复刻用户声音视觉场景理解：“看见”周围环境，结合图像和文字，提供易于理解的总结图像生成，构筑个性艺术：根据用户指令创建视觉内容，提供符合个性化需求的定制画面