一种基于视觉的抬头显示器控制系统及方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN105677206A(43)申请公布日2016.06.15(21)申请号201610013309.3(22)申请日2016.01.08(71)申请人北京乐驾科技有限公司地址100193北京市海淀区东北旺南路29号院3号楼3层3558室(72)发明人王建辉倪卫苗顺平王艳龙(74)专利代理机构北京科亿知识产权代理事务所(普通合伙)11350代理人汤东凤(51)Int.Cl.G06F3/0487(2013.01)权利要求书2页说明书9页附图5页(54)发明名称一种基于视觉的抬头显示器控制系统及方法(57)摘要本发明公开了一种基于视觉的抬头显示器控制系统及方法，系统包括，图像采集装置，用于获取驾驶环境中的图像数据；光照感应装置，用于获取驾驶环境中的光照值；光照源，用于提供补偿光照；处理装置，用以处理获得的数据。本系统能够智能实现唤醒指令、音乐切换指令、接听或拒绝来电指令、切换页面指令。且系统优选采用近红外LED在不干扰人眼的情况下在黑暗中提供照明。本发明中的控制方法操作方便、指令明确无歧义、无需附加设备，能够驾驶者满足全天候、在不同光照条件下手势的检测与识别，优选地，能同时支持静态手势和动态手势的检测识别，操作功能强大。CN105677206ACN105677206A权利要求书1/2页1.一种基于视觉的抬头显示器控制系统，其特征在于包括：图像采集装置，用于获取驾驶环境中的图像数据；光照感应装置，用于获取驾驶环境中的光照值；光照源，用于提供补偿光照；处理装置，与图像采集装置连接，用于根据上述的图像数据，形成静态或者动态的图像数据，其中静态或者动态是手势的运动状态或者手势的静止状态；如果上述的图像数据不满足预定的手势图像标准，则不对上述的图像数据进行储存；若满足，则对上述的图像数据进行储存后输出手势指令；与光照感应装置连接，用于根据上述的光照值，判断是否开启补偿光照；若是，则开启补偿光照射并再次获取驾驶环境中的图像数据。2.根据权利要求1所述的基于视觉的抬头显示器控制系统，其特征在于，上述的图像采集装置包括至少一个摄像头，该摄像头采集到二维手型形成静态图像数据，与预设的手势进行匹配成功后输出唤醒指令、音乐切换指令、接听或拒绝来电指令或者切换页面指令。3.根据权利要求1所述的基于视觉的抬头显示器控制系统，其特征在于，上述的光照感应装置，与上述光照源连接，在光照值大于设定阈值时关闭，所述光照源在光照值小于设定阈值时，控制所述光照源打开为图像采集装置提供的光照，上述的光照源为近红外LED。4.根据权利要求1所述的基于视觉的抬头显示器控制系统，其特征在于，还包括OBD通讯接口和显示界面，与上述处理装置连接，用于读取车辆CAN上的信息并实时显示在所述显示界面上。5.一种基于视觉的抬头显示器控制方法，其特征在于，包括以下步骤：获取驾驶环境中的图像数据；根据上述的图像数据，形成静态或者动态的图像数据，其中静态或者动态是手势的运动状态或者手势的静止状态；如果上述的图像数据不满足预定的手势图像标准，则不对上述的图像数据进行储存；若满足，则对上述的图像数据进行储存后输出手势指令；获取驾驶环境中的光照值；根据上述的光照值，判断是否开启补偿光照；若是，则开启补偿光照射并再次获取驾驶环境中的图像数据。6.根据权利要求5所述的基于视觉的抬头显示器控制方法，其特征在于，所述手势的静止状态基于二维手型进行识别，获取所述二维手型上的二维信息后输入得到第一图像；与预设的手势进行匹配识别，若找到与所述的第一图像匹配的第二图像则触发操作指令；或二维手势的静止状态基于二维手势进行识别追踪。7.根据权利要求5或6所述的基于视觉的抬头显示器控制方法，其特征在于，所述手势的静止状态包括：握拳、五指张开、剪刀手、食指开张中的一种或者多种，或者，将手势和手部运动结合在一起的手势运动。8.根据权利要求6所述的基于视觉的抬头显示器控制方法，其特征在于，若与预设的手2CN105677206A权利要求书2/2页势进行匹配识别时，没有找到，则重新获取驾驶环境中的光照值，根据光照值开启补偿光照，再次进行二维手型匹配。9.根据权利要求6所述的基于视觉的抬头显示器控制方法，其特征在于，所述操作指令包括：唤醒指令、导航指令，电话指令，音乐指令，微信指令中的一种或者多种，导航指令，包括用语音指令选择目的地指定、判断是否躲避拥堵路线指令、导航来源指令、行车路况指令、电子狗指令；唤醒指令，用以唤醒休眠的抬头显示器；电话指令，可发出电话指令进行语音控制接听、拨出电话，当被呼叫方存号多于一个的时候，可以语音选择；音乐指令，根据语音操作，可以播放SD卡的音乐，或者播放电台内容；微信指令，可提前通过扫码登陆微信，收到微信时会有语音提示是否播报，