抖音资讯

douyinzx

搜狗发布全球首个手语AI合成主播,“黑科技”造福听障人士

iseeyu2年前 (2024-03-22)抖音资讯112

5月17日,搜狐科技5G & AI峰会在北京举行,搜狗CEO王小川应邀出席发表主题演讲。活动中,王小川正式发布最新一代搜狗AI合成主播——全球首个手语AI合成主播“小聪”,基于搜狗领先的人工智能和AI分身技术,以“黑科技”的力量帮助听障人士更好融入社会,更好享受数字化生活。



技术突破解决听障难题


根据世界卫生组织发布的数据,全球听力障碍人群高达4.66亿,在我国则有2700万人,因无法常态化、高质量地接受资讯信息,很多听障人士难以融入社会,最终成为被遗忘和边缘化群体。


目前,在以电脑、手机为载体的各类新闻资讯、文娱节目中,引入手语协助的少之又少。即使有能力的电视节目提供手语解说时,也多以正常语序编排,很少照顾到手语的特殊表达结构,造成绝大部分听障者只能理解不足60% 的内容。因此,通过技术创新实现听障人士真正可懂的手语播报能力,对于帮助听障者克服沟通障碍,更好融入社会非常有价值。


“小聪”以打造听障人士真正可懂的通用手语播报为目标,立足于搜狗领先的数字人技术体系——搜狗分身,集成了超写实3D数字人建模、机器翻译、多模态数字人生成、迁移学习、实时面部动作生成及驱动等多项领先AI技术,实现了超写实3D数字人自然可懂的手语主播能力,使机器可以基于输入口语文本生成逼真度高、手语表达准确的3D数字人视频内容,从而具备“超写实的逼真数字人效果”、“高可懂度的手语表达能力”、“高接受度的手语展现效果”三大特点。



三大优势凸显“小聪”能力超群


数字人效果方面,“小聪”使用了行业最领先的3D重光照扫描还原、面部肌肉驱动、表情肢体手势捕捉技术,生产出了高度还原真人发肤、形象逼真、动作自然生动的数字人模型,数字人写实度的大幅突破则能够显著提升手语播报的真实感与亲切感,从而提高播报用户体验。

 

手语表达方面,“小聪”基于《国家通用手语词典》,能够实现健听人语言与听障者手语语言的机器翻译能力,基于输入的健听人语言能够低延迟生成高准确率的手语语言表征,通过搜狗分身的多模态生成技术,实时预测生成对应的超写实3D数字人驱动参数,进而快速生成数字人手语播报视频,在测评中可懂度可以达到85%以上,能有效帮助听障者克服理解障碍,达成信息有效传递。


手语展现方面,“小聪”可以完整实现手控信息及非手控信息的表达,通过机器翻译生成手语表征信息,覆盖手部动作、面部表情、口动唇动等多个维度,并基于搜狗多模态端到端生成模型进行联合建模及预测,生成高准确率的动作、表情、唇动等序列,从而达成自然、地道、接受度更高的手语表达效果。


 在此过程中,“小聪”还运用了业内领先的搜狗SLMT(Sign Langure Machine Translation)技术,在输出符合听障人士习惯自然手语的基础上,进一步提高了手语的可懂度、丰富和逼真了AI合成主播的表情与唇动能力,除了可以解决听障人士在日常生活、公共服务、特殊教育等多个场景下的信息不畅问题,还可以快速生成、批量复制,全年无休、随时随地提供服务。



赋能于人彰显社会责任


作为AI合成主播的开创者,搜狗分身一直是行业发展的风向标,也始终站在业内最前沿,而搜狗分身之所以能够“引领”行业,得益于搜狗高度的社会责任感,以及搜狗AI“赋能于人”的发展理念。


自2018年发布全球首个AI合成主播至今,搜狗分身始终在坚定践行“以人为本,为人赋能”,而“小聪”的诞生,既是搜狗分身技术的再一次迭代突破,又是搜狗聚焦更加需要帮助的听障特殊人群,将“以人为本,赋能于人”贯彻得更加彻底、更有温度的体现,同时也充分彰显了搜狗的社会责任感和企业担当。


作为全球首个手语AI合成主播,“小聪”能够帮助广大听障人士更好地接收资讯、更好地生活,更好地“看”世界,而从更高维度来看,它的广泛运用不仅可以造福国内听障人士,甚至可以走出国门、造福全球,彰显中国“智”力。



扫描二维码推送至手机访问。

版权声明:本文由西安泽虎代运营发布,如需转载请注明出处。

转载请注明出处https://www.0291.com.cn/post/68689.html

相关文章

抖音在哪看直播记录( 抖音直播间开通详细流程)

抖音在哪看直播记录( 抖音直播间开通详细流程)

抖音直播入口,抖音直播功能终于上线了,有很多小伙伴都不知道抖音的直播入口在哪里,抖音直播怎么玩呢?下面就来和小编一起具体了解一下抖音直播玩法吧! 抖音看直播入口在哪 抖音直播入口有三个地方。 1、关注界面上方是否有直播中的头像,点击“直播”头像,进入直播间; 2、推荐页头像入...

快手广告营销平台有哪些?效果如何?

快手广告营销平台有哪些?效果如何?

好多广告主在做广告的时候总是会碰到这样几个词——快手直播、磁力引擎这样的字眼。很多广告主就难免产生疑惑,他们都是做广告的吗?都是怎么样去消耗的呢?具体有什么样的区别呢?本文就带大家来了解一下吧! 首先是快手广告,官方给到的定义是快手内容加热和营销推广产品,是一款美好的创作助推器,商家经营的加速...

快手推广效果怎么样?快手广告展现样式都有哪些?

如果想了解在快手上投放广告的效果,我们先来看看快手平台拥有的几个特点:1.快手平台用户多人群广。虽然近些年有受到抖音的冲击,但是用户基础大,还是有很多忠实用户的,快手目前也是拥有1.5亿日活跃用户,3亿月活跃用户的,且快手用户三四线用户的比例较高,该类用户还是很容易受广告影...

快手投放推广,需要做哪些准备?开户推广审核要点

快手投放推广,需要做哪些准备?开户推广审核要点

快手推广找谁做:现在,快手推广的具体业务已整合在磁力引擎上了,磁力引擎 (Ocean Engine) 是字节跳动旗下的营销服务品牌 ,快手推广代运营为全球广告主提供综合数字营销解决方案。因此,如果您需要做快手推广,可以直接登录磁力引擎官方网站,找专业营销顾问进行具体业务咨询。如果不懂运营,或者运...

如何布局抖音短视频SEO?快速且长期的获取精准流量

如何布局抖音短视频SEO?快速且长期的获取精准流量

很多人很多时候看到,7天爆5000粉的方法,都很激动。然而现实是残酷的…… 类似的方法在圈子里很多,只要用心的去挖掘,几乎每隔段时间都会有。 不过,并不建议大多数者,去追寻类似的方法。 100个普通创业者里面,能玩转的人,可能只有1-2个人! 有些方法,普通网络创...

快手广告平台:获取token

快手广告平台:获取token

利用授权码auth_code,请求快手服务器,获取access_token和refresh_token及当前账户的快手信息流广告主ID。 请求地址:https://ad.e.kuaishou.com/rest/openapi/oauth2/authorize/access_token 请求方式:...

现在,非常期待与您的又一次邂逅

我们努力让每一部企业宣传片和抖音短视频成为商业大片