声网携手商汤，共拓实时音视频AI应用新边界

  【天极网IT新闻频道】日前,商汤科技日日新大模型SenseNova即将正式上线声网云市场,开发者和企业用户可通过声网的实时互动云服务进行调用,将商汤*的模型能力集成到各类应用场景中,快速构建基于日日新大模型的实时音视频对话产品和应用,实现稳定、流畅、极低延迟的音视频对话体验。

  打造稳定、实时、极低延迟的实时音视频对话体验

  全新升级的日日新大模型SenseNova,拥有更加强大的实时交互、视觉识别、记忆思考、持续对话、复杂推理,以及情绪感知和表达等能力,还可随时打断,让人机对话摆脱一问一答的刻板模式,互动体验更自然、更流畅、更丝滑。

  在实时音视频交互场景中,对话响应速度、语音清晰度等是衡量模型能力和产品体验的重要指标。在级联方案中,声网已经将端到端延时降低到650ms。

  商汤基于日日新大模型SenseNova 的多模态推理与交互能力,结合声网*的产品优势,更实现了500ms的端到端超低传输延时,与人类日常对话交互极为接近。同时,还可支持全双工通信,在弱网环境下也可有效保障传输质量,并可智能消除对话中的噪声、回声、背景人声,做到精准的人声识别,让人与 AI 的交互自然流畅。

  合作赋能用户,解锁更多应用新场景

  商汤日日新大模型SenseNova 与声网实时互动云服务的结合,有望打开更多人机交互场景,满足儿童陪伴、同声传译、视频面试、电话客服、口语陪练、心理疗愈、虚拟主播、个人助理等多元化场景的用户需求,拓展大模型的落地与应用宽度。

  此外,声网与商汤科技还将携手通过开放社区 RTE开发者社区,向有潜力的个人开发者及中小企业开放商汤日日新的深度体验,旨在持续扩大生态伙伴体系,并为开发者提供丰富的资源和平台支持。目前,双方已与40家中小企业达成深度体验合作,共同探索大模型在实时音视频交互领域的更多应用潜能。

  自2018年以来,声网与商汤科技一直保持着紧密合作,在数字人、美颜特效、人力资源大模型等场景为不同行业客户提供多种、差异化的产品和服务。未来,双方还将继续合作拓展日日新大模型的应用场景,共同将中国原创 AI 技术推向全球。