简介:基于视觉感知的手语识别系统,自动将手语翻译成文本,为聋哑人和普通人的交流提供便利。
设计基于深度图像的三维姿态估计算法,缓解光照、背景等干扰问题,同时得到更为完整的空
间运动轨迹信息。
设计帧间差分累加法进行孤立词分割,帧间差分法提取孤立词序列的关键帧,减小系统计算量。
充分利用关节轨迹前后移动关系,设计基于双向LSTM的孤立词视频分类算法,模型小、易部署。
采用阻塞消息队列,实现生产者消费者模型的进程间通信机制,解决了摄像头数据采集主进程
与识别算法子进程之间的数据耦合问题。
设计QT上位机界面,实时显示识别算法中间变量与识别结果。