(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210270876.2 (22)申请日 2022.03.18 (71)申请人 吉林云帆智能工程有限公司 地址 130000 吉林省长 春市高新 开发区博 才路与学苑街交汇栖乐荟A座9栋211 室 (72)发明人 金秋　范卓琳　赵振东　朱珊峰　 (74)专利代理 机构 北京中政联科专利代理事务 所(普通合伙) 11489 专利代理师 邵娟 (51)Int.Cl. G06V 40/20(2022.01) G06V 20/52(2022.01) G06V 20/40(2022.01) G06K 9/62(2022.01)G06V 10/74(2022.01) G06N 3/04(2006.01) (54)发明名称 一种轨道车辆行 车手语识别算法 (57)摘要 本发明公开了一种轨道车辆行车手语识别 算法， 包括： S1、 创建手语识别基础模板数据库， 作为后续后续实际识别到手语的依据； S2、 在轨 道车辆上安装动态图像监测系统， 用于实时采集 轨道车辆指定范围内的动态图像； S3、 将动态图 像监测系统获取的待识别手语视频划分为若干 组子视频， 并对各个所述子视频进行特征提取； S4、 将子视频对应的时序特征数据与所述手语识 别基础模板数据库中的数据进行对比， 通过计算 相似度进行结果输出； S5、 将输出结果传输至现 场控制室， 现场控制室生成记录日志， 并且现场 控制室将记录日志传输至远程控制室保存。 本发 明结合目前地铁智能运行系统能实现智能运行 系统根据指挥员的手 语进行运动。 权利要求书2页 说明书6页 附图2页 CN 114677757 A 2022.06.28 CN 114677757 A 1.一种轨道车辆行 车手语识别算法， 其特 征在于， 包括： S1、 创建手 语识别基础模板数据库， 作为后续后续实际识别到手 语的依据； S2、 在轨道车辆上安装动态图像监测系统， 用于实时采集轨道车辆指定范围内的动态 图像， 所述动态图像监测系统由轨边基本检测单 元、 现场控制室、 远程控制室三部分组成； S3、 将动态图像监测系统获取的待识别手语视频划分为若干组子视频， 并对各个所述 子视频进行特征提取， 得到与每个所述子视频对应的特征数据， 然后对各个所述特征数据 进行编码， 以生成与每 个所述子 视频对应的时序特 征数据； S4、 将子视频对应的时序特征数据与所述手语识别基础模板数据库中的数据进行对 比， 通过计算相似度进行 结果输出， 所述结果输出包括如下情况： 1)子视频对应的时序特征数据与所述手语识别基础模板数据库中的数据相似度≥ 90％， 直接判定与所述手 语识别基础模板数据库中的数据相同， 进行 结果输出； 2)子视频对应的时序特征数据与所述手语识别基础模板数据库中的数据相似度＜ 90％且≥70％， 将结果输出至远程控制室， 通过 人工进行二次确定， 然后进行 结果输出； 3)子视频对应的时序特征数据与所述手语识别基础模板数据库中的数据相似度＜ 70％， 直接判定与所述手 语识别基础模板数据库中的数据不相同， 不进行 结果输出； S5、 将输出结果传输至现场控制室， 现场控制室生成记录日志， 并且现场控制室将记录 日志传输 至远程控制室保存。 2.根据权利要求1所述的一种轨道车辆行车手语识别算法， 其特征在于： 步骤S3 中所述 的手语视频划分子 视频， 包括： 调用预先设置的滑动 窗， 按预设的步长， 从所述待识别手语视频的起始端依次提取与 所述滑动窗的窗长匹配的子 视频， 所述窗长大于所述 步长。 3.根据权利要求1所述的一种轨道车辆行车手语识别算法， 其特征在于： 步骤S4中所述 的子视频对应的时序特 征数据与所述手 语识别基础模板数据库中的数据的对比方法为： 1)将每个所述时序 特征数据分别与预设的各个自然语言单词进行匹配， 得到每个所述 时序特征数据分别与各个所述自然语言单词对应的自然语言概 率分布； 2)基于所述 概率分布确定与待识别视频对应的各个自然语言数据的第一 概率值； 3)将各个所述第一 概率值组成第一输出 结果； 所述在所述第一输出结果中， 按各个所述第一概率值由大至小的顺序， 选取预设数目 的自然语言数据， 包括： 依据第一概率值的大小， 对所述第一输出结果中的各个第一概率值进行排序， 并由大 至小的选取预设数目的所述第一概率值， 确定已选取的各个所述第一概率值分别对应的自 然语言数据。 4.根据权利要求1所述的一种轨道车辆行车手语识别算法， 其特征在于： 所述轨边基本 检测单元包括获取单元， 所述获取单元包括： 图像采集单元、 预处理单元、 图像分割处理单 元； 所述图像采集单 元能够对摄 像头模组进行多角度采集图像； 所述预处 理单元， 用于提取摄 像头模组图像； 所述图像分割处理单元， 用于对摄像头模组图像进行分割， 将摄像头模组图像分割成 若干个摄像头模组局部图像， 并标记；权　利　要　求　书 1/2 页 2 CN 114677757 A 2还包括： 调节单元， 用于不同角度下摄像头模组图像的摄像头模组局部 图像匹配对应， 并进行 视觉缺陷检测， 输出检测结果。 5.根据权利要求1所述的一种轨道车辆行车手语识别算法， 其特征在于： 所述现场控制 中心位于现场设备间， 实现对轨边基本检测单元 的控制、 数据和图像的采集、 分析处理、 存 储， 同时与远程控制中心进行通讯， 所述现场控制中心由配电箱、 控制箱、 工控机、 通讯箱、 UPS设备组成， 所述现场控制中心与所述远程控制中心采用远程传输通道通信连接， 所述远 程控制中心内设存 储模块， 用于存 储所述现场控制室生成记录日志。 6.根据权利要求1所述的一种轨道车辆行车手语识别算法， 其特征在于： 所述手语识别 基础模板数据库包括： 识别特征库和算法识别 模板， 对采集到的手语数据依次进行平滑滤波、 归一化、 起止点 判断操作， 对预 处理后的数据按照特征库提取具体特征， 使用聚类算法将特征分类， 将分类 结果与输入 数据的实际含义比较， 每个特征将单独给出识别率， 当识别率在k ‑means聚类算 法、 k‑medoids聚类算法、 k ‑medians聚类算法、 高斯混合模型的聚类算法组成的四种算法中 三种以上算法中分别超过70％时认为特征可用， 保留特征， 所有保留的特征组成识别特征 库， 识别特 征库按加速度数据、 角度数据、 角速度数据和肌电数据分开保存； 使用三层神经网络对提取到的特征进行算法识别， 三层神经网络算法将数据的特征融 合识别， 并针对一组手语数据得到一个识别结果， 三层神经网络算法根据识别结果与输入 数据的实际含义的偏差修改三层神经网络算法参数， 在最 终识别正确率大于70％时结束参 数修改， 保存此时的算法识别模板 。 7.根据权利要求6所述的一种轨道车辆行车手语识别算法， 其特征在于： 所述起止点判 断操作具体为： 对10个数据为一组手语的数据分组罗列对应分为10组数据， 起始点判断为某一时刻将 10组数据中的对应的数据提出， 将每组提出的数据的值与该组之前的第20个数据值做差 值， 如果有任一组的所述差值的绝对值大于0.3， 则将该时刻判定为起始 点， 在起始 点后， 提 取另一时刻10组数据中的对应的数据并将每组提出的数据的值与该组之后的第15个数据 值做差值， 如果所有组的差值的绝对值均大于0.12并在所述另一时刻后 80个数据内均满足 数据值与该 数据之后第15个数据值的差值的绝对值小于 0.12， 则判断该时刻为结束点。 8.根据权利要求4所述的一种轨道车辆行车手语识别算法， 其特征在于： 所述轨边基本 检测单元还包括： 照明单元， 所述照明单元由若干组照明装置组成的照明网络， 所述照明装置都设置有 主控板， 所述照明网络中分布有若干组人体感应装置， 所述人体感应装置将感应信息反馈 给其所在照明装置中的主控板， 所述人体感应装置的分布方式使 人体在照明网络所照射的 任一位置都能由人体感应装置感应其所处的位置 。权　利　要　求　书 2/2 页 3 CN 114677757 A 3