一帮不懂手语的工程师研发出了会比手语的AI主播 (不懂的手语)
雷锋网消息，5月17日，搜狗CEO王小川在搜狐科技5G&AI峰会对外发布了新一代搜狗AI合成主播——手语AI合成主播“小聪”。
作为搜狗AI合成主播经过两年多时间迭代后的新品，手语AI合成主播集成了超写实3D数字人建模、机器翻译、多模态数字人生成、迁移学习、实时面部动作生成及驱动技术。据搜狗官方信息显示，在组织的聋人可懂度测评中，搜狗手语AI合成主播可懂度达到了85%以上。
搜狗这款手语AI合成主播研发初衷是什么？
为什么有了语音识别生成字幕技术后，还要做搜狗手语AI合成主播？
搜狗手语AI合成主播与一脉相承的语音识别、AI分身在技术研发过程中又有何异同？
这些问题都在5月19日的媒体沟通会上由搜狗AI交互技术部总经理陈伟及他的团队进行了一一解答。
研发初衷：听障人士看字幕如学外语般艰辛
2018年11月，搜狗与新华社合作研发的AI合成主播正式问世，几经迭代后，在2020年5月，又与新华社联合推出了3D AI合成主播。
当时陈伟和他的团队在为搜狗为3D AI合成主播规划未来发展方向时，着重考虑了三个方面：
第一，要把3D能力做好；
第二，我们希望搜狗在“数字人”这个方向上有自己更高的技术壁垒；
第三，我们要找到有强烈需求的场景。
综合考虑场景、渠道和技术迭代中的创新后，2020年5月，手语AI合成主播在搜狗内部正式立项。
既然有字幕了，还要手语干什么？
这也是搜狗手语AI合成主播立项之初，陈伟当时需要考虑的问题。
对此，陈伟总结了三方面原因：
第一，并非所有听障人士能看懂字幕。
在我国2700万听障人士中，整体受教育程度参差不齐，有高中、大学学历的听障人士在这一群体中仍然只占非常小的比例，现在大家对字幕获取的能力还在逐渐培养中，要想让绝大部分听障人士看懂字幕还有很长的路要走。
第二， 「有字幕」这件事儿和「做手语」不是必须二选一的。
我们在了解信息、获取信息过程中必然会通过多种方式，我们自己在看电影的时候，有时候尽管中文的电影我们可能也会看字幕，大家本能的想法是我怎么能更快更高效的获取信息，他能看懂字幕更好，如果看不懂，还有手语可以提供信息。
第三，手语语言和有声语言之间是完全不同的语言体系，听障人士对有声语言的接受程度类似健听人对第二外语的接受程度。
听障人士即便学习了汉语，对他来说也是第二语言，就像我们在学习英语过程中，尽管我们学习了很长时间，但还是很难产生熟悉的感觉。
与此同时，听障人士在学习汉语的过程中其实天生是有障碍的，因为汉语或者普通话更多的是表音文字，每个字都有发音，我们之所以能够快速学习语音，是因为有语境。我们跟别人沟通的时候，沟通的前提是眼睛看着大家，看到了唇形，同时听到了声音，结合在一起是多模态的，但是听障人士在听力上天生有障碍，就少了一个因素让他更快地学习有声语言。他们之所以学手语学得快，是因为手语是视觉语言，不需要辅以声音进行理解。从这个角度来看，手语短期内不可能完全被字幕替换掉，它仍然是听障人士的主要学习方式，手语表达也更符合听障人士的习惯。
就在搜狗手语AI合成主播发布的同时，搜狗还对外发布了柳岩同款明星“数字人”。
据陈伟透露，柳岩同款明星“数字人”从录制到上线用了有一个月的时间，其中录制仅用了两个半天（合计一天），数据标注花了30%-40%的时间，剩下的则是技术研发和迭代用的时间。
而 手语AI合成主播“小聪”的技术难度要远远大于明星“数字人”。
研发历路：手语是门“视觉语言”
搜狗研发了多代AI合成主播，在语音识别技术上也积累颇丰。然而，手语AI合成主播对于搜狗而言，仍是一个全新的领域。
据陈伟介绍，搜狗在做手语AI合成主播“小聪”时，主要做了三方面工作：
「语言侧手语的研究」、「语言体系的翻译」和「表征表达」。
首先，在研发“小聪”过程中，搜狗最先遇到的就是手语数据库建立的问题。
搜狗开始接触手语发现了一个问题：手语语言和所有其他（有声）语言都不一样，它是一个视觉语言。
随之而来的一个问题是：“小聪”的训练数据从何而来？
陈伟解释称，手语语言如何转换成计算机语言，之前行业在做手语语言体系时并没有特别明确的做法，要么是纯语言学，要么是计算机相关背景的人根据自己的想象做手语。
在搜狗团队的认知中，手语本身是没有可记录的文字信息的，因为它本身就是视觉信息。
《国家通用手语词典》一共8000多个词，“小聪”基于《国家通用手语词典》进行健听人语言与听障者手语语言的机器翻译，在这个过程中，为了构建用于模型训练的数据库，搜狗做了三方面工作：
第一，从语序到选词，我们会考虑把健听人的语言和听障人士的语言做一个平行的翻译，这样就可以积累大量的资源，用这样的资源作为翻译系统的数据；
据陈伟透露，从翻译角度来讲，现在初步建立起来的精标数据达到几万。
其次，搜狗要考虑的第二个问题是——语言体系如何构建。
手语和汉语本质上不是一个语言体系，存在着诸多结构、表达上的差异。在这之中，“小聪”研发团队特别提到三个难点：
为此，搜狗建立了相应的语言规则尝试做相应的语序转化，通过搜狗构建数据库给算法进行训练。
为此，搜狗建立了手语到汉语之间的映射辞典，尝试去解决手语和汉语之间词汇上的差异问题。
表情、身体姿态、口动等非手控信息是搜狗在做“小聪时”遇到最大的难题，目前也在尝试通过一些建立一些表情库或存在表情标记的数据库驱动算法的设计等规则的方式来解决这一问题。
最后，搜狗还需要用这样的语言体系驱动“数字人”“小聪”完成自然连贯的手语动作、面部表情表达。
“手语翻译是一个新的话题”
陈伟一语道破研发团队立项初期的窘境。
在进行过深入研究后，陈伟发现，手语翻译是一个新的话题。
为此，陈伟请来了制定手语标准的残联及相关协会专家、教手语的手语老师、做手语推广的专业人士，由这些人组成了搜狗手语AI合成主播语言体系、产品体系、研发体系之外的智囊团作为顾问团队。
从立项之初，搜狗就一直与这一顾问团队保持着紧密联系，这也成为搜狗手语AI合成主播在技术迭代过程中不至于偏离最终用户的一个保障。
“数字人”的一个终极目标是手、嘴、表情、姿态的实时联动，完美复刻真人表达能力，这也正是手语对表达能力的需求。
据搜狗官方信息显示，“小聪”在测评中可懂度已经可以达到85%以上，能够进行有效信息传递。
对此，陈伟也向雷锋网解释：
与此同时，陈伟也指出：
原创文章，未经授权禁止转载。详情见 转载须知 。
《梦幻西游》电脑版，网易回合制网游旗舰，西游题材扛鼎之作；3.6亿注册用户，272万玩家最高在线，每月有新服开放。人物和画面超可爱、轻轻松松交朋友!
二环环保是生产安装布袋除尘器，滤筒除尘器等工业集尘器设备生产厂家，用料足喷塑涂装，出口欧美，诚邀考察。热线:400-822-9050。
国华嘉信(010-81975899)为您提供POLYCOM视频会议硬件和服务、CISCO网络视频会议，华为高清视频会议系统、宝利通视频会议解决方案，HUAWEI视会议系统，思科视会议系统，包括多媒体会议室方案设计、工程实施和调测、会议租赁服务等。
五彩群教研网在线分享各种教学设计，教学心得，教学总结，教案课件等教学资源，同时还分享工作总结，心得体会，课件下载，读后感，讲话稿等实用文档，但愿能帮助到您！
zonpo,ZONPO材质，ZONPO材质导电布，中珀，中珀电子，中珀胶带，zonpo胶带
永锋集团有限公司始建于2002年8月，现有员工11000余人。公司主要从事钢铁冶炼、地产置业、市政服务、金融投资、贸易物流、文化旅游、颐养养生、教育产业等。
广东珠三角环卫分类垃圾桶、垃圾箱、果皮箱、不锈钢垃圾桶20年专业定制品牌厂家,深圳机场、贵阳机场、广州白云机场垃圾桶等大型企业单位及市政街道景区环保垃圾箱优质生产商,分类垃圾桶垃圾箱果皮箱产品遍布全国为各大城市环卫清洁做贡献.
深圳市盛仕达电子有限公司.主营:管道风机,静音风机,直流变频风机,斜流增压管道风机,直流散热风扇,工业散热风扇,静音风扇,智能风扇定制等,我司自主生产销售,是一家拥有雄厚技术实力的专业散热风扇厂家,企业口碑优良,质量过硬,价格公道,欢迎新老客户光临惠顾。
新疆生产建设兵团库尔勒垦区人民法院新疆生产建设兵团库尔勒垦区法院
广州引能生物环境科技有限公司以重组微生物DNA和植入人工合成生物酶的促生和催化技术为核心，研发出一系列产品，分别应用于污水处理、异味控制、污泥降解和土壤修复。
苏州家教联盟网（苏州家教网）创办于2008年初,是苏州口碑较好、知名度较高的家教网站,专业为苏州中小学生提供一对一上门家教服务。家教热线:17512554996
雷锋网消息，5月17日，搜狗CEO王小川在搜狐科技5G&，AI峰会对外发布了新一代搜狗AI合成主播——手语AI合成主播，小聪，作为搜狗AI合成主播经过两年多时间迭代后的新品，手语AI合成主播集成了超写实3D数字人建模、机器翻译、多模态数字人生成、迁移学习、实时面部动作生成及驱动技术，据搜狗官方信息显示，在组织的聋人可懂度测评中...。
吃饭需要下饭菜，牛杂就是一个很美味而且很受欢迎的下饭菜，据互动百科介绍，牛杂源于老岭南地区，是用牛肉和牛的别的内脏熬上几个小时做成的一种食品，可以吃的方法有很多，比如牛杂火锅，牛杂海鲜，牛杂串，牛杂碎等，牛杂有牛肚，牛有四肚均可入馔，但蜂窝肚是好吃的，、牛膀、牛肠、牛横利和牛肺等，吃的时候来点辣椒油再加点胡椒粉，味道可口，营养价值高，...。
雷锋网AI金融评论消息，近期，人工智能风险管理服务商慧安金科正式完成亿元级B轮融资，由重庆两江中新嘉量金融科技人民币股权投资基金合伙企业，有限合伙，以下简称，中新嘉量基金，领投，现有股东高瓴资本及创新工场跟投，本次融资也是中新嘉量基金一期募集完成后投出的首个项目，慧安金科创始人，CEO黄铃表示，本轮融资将用于顶尖人才引进、智能风...。
发表在专业问答2021，6，2920，03展示机型信息，品牌型号，爱普生5700、明基w1130系统版本，nunaiOS、DOS系统爱普生5700的亮度为2700流明，比明基w1130的亮度高；爱普生5700采用3LCD显示技术，色彩表现比明基w1130的DLP好；爱普生5700的功耗为297W，比明基w1130高，明基w1130和爱...。
首页加盟首页加盟资讯行业展会2008华中，武汉，连锁加盟智慧之选创业展览会来源，神州加盟网全球加盟网上海展会，食品展会企业已备案企业已认证成交领红包展会时间，08年10月18日，19日主办单位，国际经济技术交流促进会湖北商业发展协会全球拓展，台湾连锁加盟促进会指导单位，湖北再就业服务中心武汉市商业网点办公室武汉智慧之选创业服务中心合作...。
申明，1.以上内容仅代表揭发者自己，不代表黑猫揭发立场，2.未经授权，本平台案例制止任何转载，违者将被清查法律责任，3.黑猫揭发处置揭发不收取任何费用，凡以黑猫揭发名义不要钱的均为混充、诈骗行为，请及时报警并与黑猫官网反应，揭发邮箱heimaotousu@vip.sina.com，4.请大家选用官网渠道处置生产纠纷，不要轻信第三方机构...。
