您现在的位置: 天极网 > IT新闻 > 业内快讯

王小川携虚拟主播亮相RISE大会 开可视化语音合成先河

Yesky天极新闻 2018-07-13 12:09 我要吐槽

 

(搜狗王小川在香港RISE科技峰会上展示虚拟主播)

 
  2018年7月11日,央视主播“姚雪松”播报香港RISE科技峰会相关新闻的视频出现在主演讲台上方的大屏幕上。
 
  他来了么?没来,是搜狗的王小川带“他“来的。 这是全球首个虚拟主播。
 
  搜狗使用姚雪松1.5小时的音视频数据,结合语音、图像等多模态信息进行联合建模训练,输入一段RISE大会的文字稿,可以快速预测生成与真人无异的播报效果。

 

   机器能够以“人”的形象如此轻松地播报新闻,背后是搜狗多年以来在AI上积累的技术实力。 7月份搜狗在Blizzard Challenge 2018上获得语音合成大赛冠军,而在上个月,搜狗的视觉研究团队获得了CVPR WAD2018 挑战赛冠军,早在去年,搜狗在机器翻译领域就已经取得突破,在WMT2017收获冠军,频频获奖的同时,各项AI技术不断推出,并逐步落地,搜狗的语音识别准确率已超98%,日均语音输入调用次数峰值达4亿次;唇语识别在垂直应用领域中的准确率超90%,以语言为核心,搜狗已逐步建立起独一无二的人工智能数据和技术壁垒。
 
  提及本次发布的虚拟主播的技术难点,该项目的技术负责人表示:“最大的难点在于,让机器仅使用一段文本,来预测生成逼真度极高的视频,要保持视频中主播的音频和脸部表情、唇动能够自然且一致,做到如此逼真非常难。”目前市面上还没有类似的产品,通过领先业界的语音合成和图像生成技术,搜狗率先实现了虚拟主播目前的逼真效果。

  虚拟主播在技术上的实现意味着AI具有了更丰富的表达方式从文字表达走向音视频的富媒体表达

   虚拟主播技术的应用场景非常广泛。首先,作为具备视频内容生产能力的一项技术,该技术可以运用在诸如新闻、媒体内容等场景中,自动实时快捷地生成富媒体内容。

  其次,虚拟主播技术还能根据用户上传的单张人物图片(明星、朋友、家人等)实时生成该人物的虚拟主播形象,用户可以与其面对面交流。

  结合搜狗语音交互系统知音OS能力,我们可以让虚拟主播具备交互能力,使得该项技术可以应用于教育、医疗、客服等多个行业,节约大量的人力成本。如果用于教育行业,虚拟主播可以成为脾气很好的老师,不厌其烦地一遍一遍帮助用户进行发音口型指导。
 
  此外,还可以应用于各种具备交互能力的智能软硬件。如果用于带屏幕的智能音箱,虚拟主播就可以发展成为虚拟私人助理,用户可以从单纯与声音的交互变成与一个逼真的虚拟人物的交互。
 
  虚拟主播可能还会催生具有情感的交互App,比如帮助粉丝和爱豆实现“面对面”交互的追星App;上传用户自己喜欢的形象,结合搜狗的问答技术,可以与之进行定制化问答的陪伴App等。
 
  虚拟主播究竟会以何种方式渗入我们人类的生活尚不可知,或许有一天将打破次元壁和时空无处不在;未来,不管是银行服务,还是电视节目,或是演唱会上的嘉宾,或许都可以看到它们的身影。
 
  这位技术人员说:“后续,除了优先提升人机交互的体验外,我们也会继续优化虚拟主播的真实感,并在虚拟主播情感表达上做更加深入的研究。” 
 
  他解释说搜狗这次展示的虚拟主播还没有添加“情感”,还显得比较生硬。

(广告资讯)
免责声明:以上内容为本网站转自其它媒体,相关信息仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性。
评论
* 网友发言均非本站立场,本站不在评论栏推荐任何网店、经销商,谨防上当受骗!
今日更新
1大公司晨读:小米否认辐射量超标
大公司晨读

小米印度于12日发表声明,称在印度销售的小米智能手机都符合印度的SAR…

2这E天:传滴滴亏损109亿
这E天

苹果春季新品发布会主角非硬件产品;开年旗舰小米9正式官宣,2月20日见…

3三星S10预售:多款机型供选择
三星S10预售

三星S10系列将于2月21日发布,目前三星官网已经开启了三星S10系列…

4小米9终于官宣 2月20日见
小米9

今天上午10点,小米官方正式宣布了2019开年旗舰——小米9将于2月2…

5小米9“战斗天使”官宣
小米9官宣

小米9正式官宣,将于2月20日召开发布会。小米内部为小米9取名代号“战…

热门文章
1《流浪地球》高清资源被泄露
流浪地球电影

截止到昨日下午,《流浪地球》票房已经破十亿,而片方却无暇庆祝。

2大公司:小米获得四曲面屏幕专利
大公司晨读

小米获得四曲面屏幕专利:上下左右都是弯的;德国不想禁止华为参与该国5G…

3大公司晨读:春节游客最多城市
大公司晨读

春节游客接待最多城市排名出炉,重庆位居第一名,北京和上海分别位居第二三…

4大公司:苹果发布iOS最新更新
大公司晨读

苹果发布iOS 12.1.4更新 修复FaceTime漏洞;支付宝全球…

5大公司晨读:2019春节数据比拼
大公司晨读

大公司晨读:2019春节期间,8.23亿人收发微信红包、美团外卖年夜饭…

6大公司晨读:iPhone换机周期
大公司晨读

伯恩斯坦的分析师表示,人们对iPhone的更新换代周期延长,这可能给苹…

7大公司晨读:vivo全新子品牌iQOO
大公司晨读

vivo官方正式宣布了“iQOO手机”,从海报来看,“iQOO手机”似…

8小米9终于官宣 2月20日见
小米9

今天上午10点,小米官方正式宣布了2019开年旗舰——小米9将于2月2…

9收藏贴:iPhone实用小技巧合集
iPhone小技巧

这是天妹搜集的有关iPhone的实用小技巧合集,奉献给大家,记得收藏起…

10印度孩子举拖鞋自拍:雷军感慨
举拖鞋自拍

一组印度小孩举拖鞋“自拍”照走红网络,照片中五个印度小孩高举拖鞋进行“…

每日IT极热