返回- 新闻中心
实时音视频交互领域，，，，，，，，商汤日日新第一！
商汤日日新融合大模子又拿了个第一，，，，，，，，照旧在现在最火的实时音视频交互领域！
1月26日，，，，，，，，实时音视频中文测评基准SuperCLUE-Live首测效果出炉了，，，，，，，，商汤日日新融合大模子交互版（SenseNova-5o，，，，，，，，以下简称“日日新5o”）以总分68.59排名海内第一。 。。。。。。
AI的交互方法已经从简朴的文字形式进化到真人级别的实时语音视频形式，，，，，，，，体验好又适用的AI交互究竟应该是什么样的 ？？？？？
融合模态能力“特训”，，，，，，，，实时音视频交互“日日新5o”斩获第一
SuperCLUE-Live是中国首个音视频评测基准，，，，，，，，前瞻性面向新一代实时音视频交互产品的综合能力（划重点：是语音+视频的综合能力，，，，，，，，不是单独针对语音/视频）。 。。。。。。
“日日新5o”之以是斩获第一、成为综合性选手，，，，，，，，源自于商汤科技接纳原生融合的方法，，，，，，，，深度融合了视频、图片、语音和文本等模态，，，，，，，，并团结多模态交织数据团结训练。 。。。。。。以是“日日新5o”可以实现对多模态信息的感知和明确及影象。 。。。。。。同时，，，，，，，，通过团结实时的RTC网络，，，，，，，，可以提供实时的音视频交互体验。 。。。。。。
影象强、交互佳，，，，，，，，“日日新”基础认知全球领先
底座大模子的强盛性能，，，，，，，，让商汤“日日新5o”全方位能力业内领先：基础认知能力逾越ChatGPT位列第一，，，，，，，，影象能力、语音交互能力稳居海内第一。 。。。。。。
基础认知能力维度方面，，，，，，，，“日日新5o”以77分逾越ChatGPT的70.5分排名第一，，，，，，，，SuperCLUE报告显示，，，，，，，，在现实测评中“日日新5o”识别物体准确性方面略优于ChatGPT。 。。。。。。
在商汤“日日新”融合大模子训练历程中，，，，，，，，由训练采样的数据规模（domain）场景笼罩极为富厚，，，，，，，，具备足够的多样性（diversity），，，，，，，，通过团结视频及图片文本的交织数据举行融合后训练，，，，，，，，确保了模子关于种种场景及物体，，，，，，，，都具备强盛的明确和识别能力。 。。。。。。
在应用场景测试中，，，，，，，，“日日新5o”体现出通过海量训练积累的深挚知识储备，，，，，，，，这让它脱颖而出，，，，，，，，展现出强盛的竞争优势。 。。。。。。例如，，，，，，，，在SuperCLUE官方测评例证中，，，，，，，，在医疗场景下“日日新5o”展现出卓越的明确与推理能力，，，，，，，，精准掌握场景中的要害信息。 。。。。。。
在影象能力维度方面，，，，，，，，商汤“日日新5o”同样大幅领先其他海内产品。 。。。。。。在测试中，，，，，，，，它能够很好地记着用户偏好和需求，，，，，，，，以及场景信息。 。。。。。。
通过接纳先进的差别模态信息的压缩手艺，，，，，，，，大幅度提升了“日日新5o”的信息影象效率，，，，，，，，让5o在相同的context windows下，，，，，，，，展现出比其他模子更强的影象力。 。。。。。。
同时在训练历程中，，，，，，，，我们还全心构建了音视频交织的多轮会话数据，，，，，，，，进一步强化模子的影象能力。 。。。。。。最终，，，，，，，，团结多模态对话系统中的session治理机制，，，，，，，，“日日新5o”能够在长时间、多模态音视频对话场景中，，，，，，，，展现强盛影象能力，，，，，，，，能准确回溯对话内容，，，，，，，，为用户提供连贯、高效的交互体验。 。。。。。。
在语音交互能力维度上，，，，，，，，商汤拥有在拟人对话场景的富厚研发积累，，，，，，，，结构了大宗拟人化的对话数据及语音会话数据，，，，，，，，使“日日新5o”在语音的对话回复上越发自然。 。。。。。。同时团结全双工能力，，，，，，，，在对话中也可实时打断，，，，，，，，使交互体验更靠近人与人之间的交流。 。。。。。。
别的，，，，，，，，在训练历程中，，，，，，，，商汤还融入了多语言能力，，，，，，，，因此在SuperCLUE测试中能够完善实现“信雅达”的英文翻译。 。。。。。。
在落地应用与维护层面，，，，，，，，商汤“日日新5o”构建了一套完整的多模态交互系统。 。。。。。。通过融入了商汤自研的高效推理框架lightllm，，，，，，，，搭配模子量化及推理Cache等综合解决计划，，，，，，，，确保高性能的同时，，，，，，，，极大降低推理本钱。 。。。。。。
现在，，，，，，，，商汤已就「日日新5o」与凌驾50家企业客户睁开商务相同，，，，，，，，将模子手艺和场景深度团结，，，，，，，，实现交互优化，，，，，，，，一直提升用户体验。 。。。。。。
5o商务相助
请联系： SenseNova-5o-support@sensetime.com
正式接口及接入计划请参考：https://sensenova5o_doc.sensetime.com/introduction/intro.html
