本项目建立了一个拟人化的人机交互系统,实现基于虚拟现实技术的手语合成、基于视觉感知的静态手势识别、基于图像和视频序列分析的表情识别以及基于正侧面相片拼接的表情合成等功能。获得8项国家计算机软件著作权,撰写了1部人机交互专著,获得2008年深圳市科技创新奖(第一),《手语翻译系统》和《手语教学系统》分别被评为2007年和2008年国家重点新产品,构建了《中国标准手语库》(共5587词)。
项目成果应用于智能人机接口、数字娱乐等领域。中央电视台一套《科技博览》作了题为“手语手机”的专题报道。“本产品在汉语手语词的准确度、机器翻译的准确度、虚拟人手语表达的逼真程度等指标方面超过国际同类产品的水平。填补了国内在手语教学、手语翻译等产业的空白,并对于发展残疾人福利事业、建立社会主义和谐社会具有重要意义。”
图1 手语合成系统及中央一套采访课题组情况
图2 手语新闻播报系统