logo好方法网

一种基于视觉的疲劳驾驶主机的检测系统及方法


技术摘要:
本发明涉及一种基于视觉的疲劳驾驶主机的检测系统及方法,其系统包括视频录像回放组件,根据工控机的控制指令实时生成时间戳信息,对预先存储的视频片段进行解析,并生成的解析文件;疲劳驾驶主机,接收解析文件,判断对应的驾驶员状态信息;工控机,向视频录像回放组  全部
背景技术:
随着汽车智能化、以及摄像技术的发展,越来越多的基于图像传感识别的产品被 应用在汽车上,特别是近2-3年,基于视觉的疲劳驾驶预警开始广泛应用于汽车领域。 疲劳驾驶预警系统主要功能是检测可能影响驾驶安全的行为,在为驾驶员提供安 全预警的同时,为监管部门提供技术手段,常见的疲劳驾驶产品功能包括如下两个方面: 1、基于图像识别原理,对闭眼、打哈欠、打电话、低头分神、抽烟、左顾右盼等存在安全 隐患的驾驶行为进行检测和预警提示。 2、通过汽车CAN总线发送对应的报警报文。 目前,相关疲劳驾驶产品的生产中普遍存在如下几个问题: 1、目前生产主要是采用检测员模拟闭眼、打哈欠、打电话等行为动作,来达到功能检测 的目的,这种检测方法效率低下,且由于动作是检测员模拟的,随机性太大,不利于保证产 品一致性。 2、疲劳驾驶检测的成功率会受到车辆的颠簸、摄像头的安装角度、阳光光线情况 等各方面的影响。而在工厂的环境下,不可能完全模拟装车状态下的实际应用场景。 3、如何在不影响产能的情况下,做到人、机、物、料、法的有效控制和留存,是保证 疲劳驾驶产品质量得到保证的关键。现有的疲劳驾驶产品的检测无法做到人、机、物、料、法 的有效的控制、跟踪和留存。
技术实现要素:
本发明所要解决的技术问题是针对上述现有技术的不足,提供一种基于视觉的疲 劳驾驶主机的检测系统及方法。 本发明解决上述技术问题的技术方案如下:一种基于视觉的疲劳驾驶主机的检测 系统,包括视频录像回放组件、疲劳驾驶主机、工控机、扫描枪和显示器; 所述视频录像回放组件,用于根据所述工控机的控制指令实时生成时间戳信息,对预 先存储的疲劳状态和非疲劳状态的视频片段进行解析,并将生成的包含有所述时间戳信息 的解析文件实时发送至所述疲劳驾驶主机; 所述疲劳驾驶主机,用于接收所述解析文件,根据所述解析文件判断对应的驾驶员状 态信息,并发送至所述工控机; 所述工控机,用于向所述视频录像回放组件发送控制指令,还用于根据所述疲劳驾驶 主机发送的所述驾驶员状态信息与预先存储的所述视频片段对应的预设标准状态信息映 射表进行比对,并生成检测结果; 所述扫描枪,用于扫描预先设置在所述疲劳驾驶主机上的设备标识,读取所述疲劳驾 4 CN 111597924 A 说 明 书 2/8 页 驶主机的设备信息并发送至所述工控机; 所述显示器,用于显示所述疲劳驾驶主机的设备信息和对应的检测结果。 本发明的有益效果是:本发明的基于视觉的疲劳驾驶主机的检测系统,通过视频 录像回放组件对预先存储的疲劳状态和非疲劳状态的视频片段进行解析,然后由所述疲劳 驾驶主机根据解析文件实时确定驾驶员状态信息,并由工控机根据预设标桩状态信息映射 表实时确定所述疲劳驾驶主机确定的驾驶员状态信息是否准确,以确定疲劳驾驶主机是否 合格,大大提高了检测效率,避免传统的检测中的随机性影响检测结果,不会受到车辆的颠 簸、摄像头的安装角度、阳光光线情况等外部因素的影响,保证出厂检验的有效性,一致性, 同时通过对所述设备信息进行跟踪,实现对产品检测有效的控制、跟踪和留存。 在上述技术方案的基础上,本发明还可以做如下改进: 进一步:所述视频录像回放组件包括主控制器、存储器、解码模块和通讯模块,所述存 储器、解码模块和通用模块分别与所述主控制模块电连接; 所述存储器,用于预先存储疲劳状态和非疲劳状态的视频片段; 所述通讯模块,用于所述主控制器与所述工控机进行通讯,并传送所述控制指令; 所述主控制器,用于根据所述控制指令读取预先存储在所述存储器中的疲劳状态和非 疲劳状态的视频片段,并发送至所述解码模块; 所述解码模块,用于对所述疲劳状态和非疲劳状态的视频片段进行解码处理,生成的 解析文件并发送至所述疲劳驾驶主机; 其中,所述解析文件包括图像帧以及对应的时间戳信息。 上述进一步方案的有益效果是:通过所述存储器预先存储疲劳状态和非疲劳状态 的视频片段,这样通过所述主控制器根据所述控制指令读取预先存储在所述存储器中的疲 劳状态和非疲劳状态的视频片段,然后由所述解码模块对所述疲劳状态和非疲劳状态的视 频片段进行解码处理,这样即可得到多个图像帧,这样便于所述疲劳驾驶主机直接根据所 述图像帧确定对应的驾驶员状态信息。由于在工厂只能模拟常规的场景、无法覆盖车辆颠 簸、阳光剧烈变化、以及摄像头特殊的拍摄角度场景要求,本方法可以事先采集这些应用场 景,保证这些场景在下线检测时进行覆盖,以提高下线检测的有效性。 进一步:所述解码模块生成解析文件的具体实现为: 所述解码模块对所述疲劳状态和非疲劳状态的视频片段进行解码处理,得到多个图像 帧; 所述解码模块读取所述图像帧,将其与对应的所述时间戳信息关联并生成所述解析文 件,将所述解析文件实时发送至所述疲劳驾驶主机。 上述进一步方案的有益效果是:通过将所述解码模块解码后得到的多个图像帧与 对应的时间戳信息关联,这样后续工控机在收到所述图像帧对应的驾驶员状态后方便与预 设标准状态信息映射表进行比对,以确定所述疲劳驾驶主机是否合格。 进一步:所述疲劳驾驶主机根据所述解析文件判断对应的驾驶员状态的具体实现 为: 读取所述解析文件中的图像帧,并对所述图像帧进行图像特征提取处理,获取图像特 征信息; 将所述图像特征信息与预先存储的多种疲劳状态图像特征信息进行匹配,如果二者匹 5 CN 111597924 A 说 明 书 3/8 页 配,则确定对应的驾驶员状态信息为疲劳状态,否则,确定对应的驾驶员状态信息为非疲劳 状态; 读取所述解析文件中所述图像帧对应的时间戳信息,将其与对应的所述驾驶员状态信 息关联,并发送至所述工控机。 上述进一步方案的有益效果是:通过对所述图像帧进行图像特征提取处理,提取 图像特征信息,方便将所述图像特征性与对应的所述疲劳状态图像特征信息进行匹配,以 准确确定对应的驾驶状态信息。 进一步:所述工控机生成所述检测结果的具体实现为: 读取所述驾驶员状态信息和对应的时间戳信息,并根据所述时间戳信息从预设标准状 态信息映射表中读取对应的预设标准状态信息进行比对,如果二者匹配,则所述疲劳驾驶 主机检测合格;否则,所述疲劳驾驶主机检测不合格。 上述进一步方案的有益效果是:通过所述时间戳信息即可从所述预设标准状态信 息映射表中读取对应的预设标准状态信息,然后将所述驾驶员状态信息与对应的预设标准 状态信息比对,从而可以准确判断所述疲劳驾驶主机是否合格,检测效率高,检测结果准 确,产品出厂一致性好。 进一步:所述的基于视觉的疲劳驾驶主机的检测系统还包括打印模块,用于在所 述疲劳驾驶主机的检测结果为合格时,打印包含有所述检测结果和设备信息并粘贴于产品 上的产品标签。 上述进一步方案的有益效果是:通过所述打印模块可以直接打印包含有所述检测 结果和设备信息并粘贴于产品上的产品标签,方便对出厂产品进行标记,方便后续包装识 别。 进一步:所述视频录像回放组件对预先存储的疲劳状态和非疲劳状态的视频片段 进行解析之前,还对所述疲劳状态和非疲劳状态的视频片段的解析顺序进行随机交换,以 保证每个所述视频片段的初始解析顺序均被交换; 其中,每个所述视频片段包含多幅疲劳状态对应的图像帧或多幅非疲劳状态对应的图 像帧。 上述进一步方案的有益效果是:通过将所述疲劳状态和非疲劳状态的视频片段的 解析顺序进行随机交换,这样可以使得检测结果不具备规律性,这样可以保证检测结果更 加可靠。 本发明还提供了一种基于视觉的疲劳驾驶主机的检测方法,  包括如下步骤: 视频录像回放组件根据工控机的控制指令实时生成时间戳信息,对预先存储的疲劳状 态和非疲劳状态的视频片段进行解析,并将生成的包含有所述时间戳信息的解析文件实时 发送至疲劳驾驶主机; 疲劳驾驶主机接收所述解析文件,根据所述解析文件判断对应的驾驶员状态信息,并 发送至所述工控机 所述工控机根据所述疲劳驾驶主机发送的所述驾驶员状态信息与预先存储的所述视 频片段对应的预设标准状态信息映射表进行比对,并生成检测结果; 扫描枪扫描预先设置在所述疲劳驾驶主机上的设备标识,读取所述疲劳驾驶主机的设 备信息并发送至所述工控机; 6 CN 111597924 A 说 明 书 4/8 页 显示器显示所述疲劳驾驶主机的设备信息和对应的检测结果。 本发明的基于视觉的疲劳驾驶主机的检测方法,通过视频录像回放组件对预先存 储的疲劳状态和非疲劳状态的视频片段进行解析,然后由所述疲劳驾驶主机根据解析文件 实时确定驾驶员状态信息,并由工控机根据预设标桩状态信息映射表实时确定所述疲劳驾 驶主机确定的驾驶员状态信息是否准确,以确定疲劳驾驶主机是否合格,大大提高了检测 效率,避免传统的检测中的随机性影响检测结果,可以覆盖车辆的颠簸、摄像头的安装角 度、阳光光线情况等应用场景的测试,保证出厂检验的有效性,一致性,同时通过对所述设 备信息进行跟踪,实现对产品检测有效的控制、跟踪和留存。 在上述技术方案的基础上,本发明还可以做如下改进: 进一步:所述视频录像回放组件对预先存储的疲劳状态和非疲劳状态的视频片段进行 解析,并将生成的包含有所述时间戳信息的解析文件发送至所述疲劳驾驶主机具体包括: 对所述疲劳状态和非疲劳状态的视频片段进行解码处理,得到多个图像帧; 读取所述图像帧,将其与对应的所述时间戳信息关联并生成所述解析文件,将所述解 析文件实时发送至所述疲劳驾驶主机。 上述进一步方案的有益效果是:通过将所述解码模块解码后得到的多个图像帧与 对应的时间戳信息关联,这样后续工控机在收到所述图像帧对应的驾驶员状态后方便与预 设标准状态信息映射表进行比对,以确定所述疲劳驾驶主机是否合格。 进一步:所述视频录像回放组件对预先存储的疲劳状态和非疲劳状态的视频片段 进行解析之前,还包括如下步骤: 对所述疲劳状态和非疲劳状态的视频片段的解析顺序进行随机交换,以保证每个所述 视频片段的初始解析顺序均被交换; 其中,每个所述视频片段包含多幅疲劳状态对应的图像帧或多幅非疲劳状态对应的图 像帧。 上述进一步方案的有益效果是:通过将所述疲劳状态和非疲劳状态的视频片段的 解析顺序进行随机交换,这样可以使得检测结果不具备规律性,这样可以保证检测结果更 加可靠。 附图说明 图1为本发明的基于视觉的疲劳驾驶主机的检测系统结构示意图; 图2为本发明的基于视觉的疲劳驾驶主机的检测方法流程示意图。
下载此资料需消耗2积分,
分享到:
收藏