一名热爱体感技术的
业余专业开发人员

[视频]基于Kinect的手语翻译系统

 基于Kinect的手语翻译系统是中国研究出来的(虽然获得了一些微软许多技术支持),融入了诸多微软的产品功能(必应词典、微软翻译)。Kinect目前被越来越多中国公司开发项目,但国内真正受到关注的也仅仅只有这个项目了。当时我第一眼看到这个项目时(2012.11天津),我就知道秒杀其他kinect项目,是逆天的应用。

下面是最新的视频,相对于一年前简单的手语识别系统的功能,如今的系统增强了不少(主要是微软在这一年多时间里的功劳吧)!

世界各地有3.6亿的听力障碍人士,其中来自中国的听力障碍患者人数将近2100万。每一天,他们都面临着大多数人从来无需考虑也难以想象的沟通挑战。我们长期以来致力研发,试图解决这个困扰业界多年的难题:如何开发一种工具,让人“听”得懂手语,帮助听障人士改善生活质量。为此,我们正在与中国科学院计算技术研究所和北京联合大学合作,借助Kinect设备打破沟通障碍。高性价比的Kinect通过同时捕捉色彩和深度图像信息为我们实现目标开辟了新的机遇。这项研发以微软研究院在翻译和自然语言处理、语音和手势识别等自然用户界面领域的广泛研究成果为基础,并更进一步。多式输入数据的应用将突破先前单纯依靠视觉输入或语音数据的局限性。其所应用的技术除 Kinect For Windows外,还包括必应词典、微软翻译、语言建模和3D建模等来自微软亚洲研究院的技术。设想一下,听障人士在健听的观众面前用自己的语言(手语)发表演说,每位观众都能不费吹灰之力听懂他的演说,这让我们看到了让聋哑患者“发声”的新希望。

<CCTV2视频>现场直击微软亚洲研究院创新日

2013年10月30日,微软亚洲研究院创新日在北京举办。现场以自然用户界面,大数据与机器学习,云计算与移动技术,科技引领产品创新为四大主题,展出了20余项研发技术。基于Kinect的手语翻译系统受到关注,该技术通过体感系统,实现听障人士与普通人之间的沟通。[来自新浪]