Google推AI手部追踪技术即时翻译手语

现今全世界有数百种手语在听障社群中使用，但将手语复杂的手势即时翻译成口语的技术，暂停留在发展阶段。Google AI实验室推出即时手部追踪新技术，日后可望以手机即时翻译。

由于使用手语时，手势可能会遮住自己的手指、手掌，或是手会抖动；而且手部动作通常既快速又细微，就算同时采用多个摄影镜头，都仍然难于在手机或行动装置环境中进行追踪、辨识、分析并即时翻译。Google AI研究人员先让系统捕捉手掌，因为手掌大小通常固定，且是方形，可以避免系统在处理矩形或其他特殊图像时所带来的辨识困扰。当识别手掌后，其延伸出去的手指就可以被个别分析，依据所设定的21个座标，分析出指关节、指尖与手掌的距离，甚至根据手掌的大小、角度，推测出目前手势的形状。

为了完成这个手指识别的部分，研究人员必须先手动将这21个座标添加到各种姿势和照明情况下的3万张手部图像中，以供机器学习系统摄取和学习。之后，透过机器学习，手语动作就可以跟已知的手势相比对，从字母和数字的手语符号对应到所指语言。

据外媒报道，目前Google还未将研究成果用在任何产品上。Google AI博客的文章指出，未来希望让追踪技术变得更稳定，辨识更多手势，并希望透过公开新技术，让研究开发社群可以参与项目。