智能座舱系统的人机交互设计方法、电子设备及介质与流程

未命名 07-12 阅读:75 评论:0


1.本技术涉及智能座舱领域,尤其涉及一种智能座舱系统的人机交互设计方法、电子设备及存储介质。


背景技术:

2.随着汽车智能化的发展,如今的汽车已经可以实现在汽车座舱中通过座舱设备为用户提供播放音乐、灯光控制,以及接收车辆状态信息等车辆交互功能。传统汽车座舱功能区布局碎片化、信息过载造成了人车交互的障碍,从而把导致了将汽车本身作为交互入口的价值被低估,目前人们对行车驾驶的安全性越加重视,各种交通事故中由于长时间疲劳驾驶导致的事故更是数不胜数,因此针对驾驶员的行车状态也有了对应的检测方法,但目前对于驾驶员处于疲劳状态时的处理办法主要是通过各种提神手段促使驾驶员恢复清醒状态,不能从根本上解决驾驶疲劳问题,从而导致疲劳驾驶的安全性过低。


技术实现要素:

3.本技术的主要目的在于提供一种智能座舱系统的人机交互设计方法、电子设备及介质,旨在解决疲劳驾驶状态下的安全性低的技术问题。
4.为实现上述目的,本技术提供一种智能座舱系统的人机交互设计方法,所述智能座舱系统的人机交互设计方法包括:
5.通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态;
6.若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式;
7.查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息;
8.若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式控制所述智能座舱对应的车辆前往所述停车点。
9.可选地,所述通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态的步骤包括:
10.通过所述智能座舱中的车载摄像头采集所述驾驶员的面部图像信息,并从所述面部图像信息中提取中的识别点;
11.根据预设头部模型、所述面部图像信息中的识别点确定所述驾驶员的头部姿态;
12.根据所述头部姿态、所述识别点确定所述驾驶员是否存在当前疲劳状态;
13.当检测到所述驾驶员存在当前疲劳状态的持续时间超过第二预设时间阈值时,判定所述驾驶员存在疲劳状态。
14.可选地,所述根据预设头部模型、所述面部图像信息中的识别点确定所述驾驶员的头部姿态的步骤包括:
15.根据所述识别点中的各预设识别点,建立所述面部图像信息与所述预设头部模型
的映射矩阵;
16.根据所述映射矩阵调整所述预设头部模型得到当前头部三维模型;
17.根据所述预设头部模型与所述当前头部三维模型确定所述驾驶员的头部姿态。
18.可选地,所述根据所述头部姿态、所述识别点确定所述驾驶员是否存在当前疲劳状态的步骤包括:
19.根据各所述识别点的运动情况确定横向变化幅值与纵向变化幅值;
20.判断所述横向变化幅值与所述纵向变化幅值是否超过预设变化阈值;
21.若所述横向变化幅值或所述纵向变化幅值超过所述预设变化阈值,则判定所述驾驶员存在疲劳状态。
22.可选地,所述查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息的步骤包括:
23.通过车载导航软件查询所述智能座舱周边预设距离内的停车点对应的位置信息;
24.将从当前位置到各所述停车点的导航路线进行对比,得到预计驾驶时间最短的一个停车点;
25.将从所述当前位置到所述停车点之间的导航路线推送给所述驾驶员,并发出语音提示。
26.可选地,在所述通过智能座舱内的车载摄像机对所述驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态的步骤之前,还包括:
27.通过可视化输入界面获取用户输入的预设初始指令,其中,所述预设初始指令包括各时间信息以及各车辆状态信息共同对应的各智能座舱控制指令,所述智能座舱控制指令至少包括灯光控制指令、音乐控制指令、空调控制指令、车窗控制指令、雨刮器控制指令以及蓝牙控制指令其中的一种;
28.当检测到所述驾驶员进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令,控制所述智能座舱执行对应的初始操作。
29.可选地,所述当检测到用户进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令控制所述智能座舱执行对应的初始操作的步骤包括:
30.对所述智能座舱中的座椅进行压力检测;
31.当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱;
32.根据所述当前时间信息以及所述当前车辆状态信息,在所述预设初始指令中查询到对应的智能座舱控制指令,其中,所述当前车辆状态信息至少包括温度信息,车辆运行信息以及车体感应信息中的一种;
33.根据所述智能座舱控制指令,控制所述智能座舱执行所述智能座舱控制指令对应的初始操作。
34.可选地,在所述当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱的步骤之后,还包括:
35.判断所述座椅受到的压力值是否在预设压力范围内,其中,所述预设压力范围根据预设用户坐下时所述座椅受到的压力值确定;
36.若是,则判定所述驾驶员为所述预设用户;
37.若否,则判定所述驾驶员不为所述预设用户,并推送通知消息给所述预设用户。
38.本技术还提供一种智能座舱系统的人机交互设计装置,所述智能座舱系统的人机交互设计装置应用于智能座舱系统的人机交互设计设备,所述智能座舱系统的人机交互设计装置包括:
39.疲劳检测模块,用于通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态;
40.辅助驾驶模块,用于若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式;
41.导航模块,用于查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息;
42.自动驾驶模块,用于若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式控制所述智能座舱对应的车辆前往所述停车点。
43.可选地,所述疲劳检测模块还用于:
44.通过所述智能座舱中的车载摄像头采集所述驾驶员的面部图像信息,并从所述面部图像信息中提取中的识别点;
45.根据预设头部模型、所述面部图像信息中的识别点确定所述驾驶员的头部姿态;
46.根据所述头部姿态、所述识别点确定所述驾驶员是否存在当前疲劳状态;
47.当检测到所述驾驶员存在当前疲劳状态的持续时间超过第二预设时间阈值时,判定所述驾驶员存在疲劳状态。
48.可选地,所述疲劳检测模块还用于:
49.根据所述识别点中的各预设识别点,建立所述面部图像信息与所述预设头部模型的映射矩阵;
50.根据所述映射矩阵调整所述预设头部模型得到当前头部三维模型;
51.根据所述预设头部模型与所述当前头部三维模型确定所述驾驶员的头部姿态。
52.可选地,所述疲劳检测模块还用于:
53.根据各所述识别点的运动情况确定横向变化幅值与纵向变化幅值;
54.判断所述横向变化幅值与所述纵向变化幅值是否超过预设变化阈值;
55.若所述横向变化幅值或所述纵向变化幅值超过所述预设变化阈值,则判定所述驾驶员存在疲劳状态。
56.可选地,所述导航模块还用于:
57.通过车载导航软件查询所述智能座舱周边预设距离内的停车点对应的位置信息;
58.将从当前位置到各所述停车点的导航路线进行对比,得到预计驾驶时间最短的一个停车点;
59.将从所述当前位置到所述停车点之间的导航路线推送给所述驾驶员,并发出语音提示。
60.可选地,所述初始模块还用于:
61.对所述智能座舱中的座椅进行压力检测;
62.当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱;
63.根据所述当前时间信息以及所述当前车辆状态信息,在所述预设初始指令中查询
到对应的智能座舱控制指令,其中,所述当前车辆状态信息至少包括温度信息,车辆运行信息以及车体感应信息中的一种;
64.根据所述智能座舱控制指令,控制所述智能座舱执行所述智能座舱控制指令对应的初始操作。
65.可选地,所述初始模块还用于:
66.判断所述座椅受到的压力值是否在预设压力范围内,其中,所述预设压力范围根据预设用户坐下时所述座椅受到的压力值确定;
67.若是,则判定所述驾驶员为所述预设用户;
68.若否,则判定所述驾驶员不为所述预设用户,并推送通知消息给所述预设用户。
69.可选地,所述初始模块还用于:
70.采集所述驾驶员的面部图像信息,根据所述面部图像信息判断所述驾驶员是否为预设用户;
71.若否,则推送通知消息给所述预设用户。
72.可选地,所述认证模块还用于:
73.当检测到所述驾驶员发出的交互指令语音,通过声纹认证模型对所述交互指令语音进行识别,判断所述交互指令语音是否符合预设声纹;
74.若所述交互指令语音符合所述预设声纹,则将所述交互指令语音的声纹认证状态置为声纹认证通过;
75.若所述交互指令语音不符合所述预设声纹,则将所述交互指令语音的声纹认证状态置为声纹认证失败,并推送通知消息给预设用户。
76.可选地,所述执行模块还用于:
77.提取所述交互指令语音中的交互指令,并根据所述交互指令查询对应的座舱设备;
78.根据所述交互指令控制所述座舱设备执行所述交互指令对应的交互操作。
79.可选地,所述执行模块还用于:
80.当检测到所述智能座舱的座椅受到的压力值减少幅值超过第二预设压力阈值时,向所述驾驶员推送语音提示信息,其中,所述语音提示信息用于询问所述驾驶员是否需要关闭所述智能座舱中的各座舱设备;
81.当接收到所述驾驶员发出的设备关闭指令时,初始化所述智能座舱中各座舱设备。
82.可选地,智能座舱系统的人机交互设计装置还包括初始化模块:
83.可选地,所述初始化模块还用于:
84.通过可视化输入界面获取用户输入的预设初始指令,其中,所述预设初始指令包括各时间信息以及各车辆状态信息共同对应的各智能座舱控制指令,所述智能座舱控制指令至少包括灯光控制指令、音乐控制指令、空调控制指令、车窗控制指令、雨刮器控制指令以及蓝牙控制指令其中的一种;
85.当检测到所述驾驶员进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令,控制所述智能座舱执行对应的初始操作。
86.可选地,所述初始化模块还用于:
87.通过可视化输入界面获取用户输入的预设初始指令,其中,所述预设初始指令包括各时间信息以及各车辆状态信息共同对应的各智能座舱控制指令,所述智能座舱控制指令至少包括灯光控制指令、音乐控制指令、空调控制指令、车窗控制指令、雨刮器控制指令以及蓝牙控制指令其中的一种;
88.当检测到所述驾驶员进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令,控制所述智能座舱执行对应的初始操作。
89.可选地,所述初始化模块还用于:
90.判断所述座椅受到的压力值是否在预设压力范围内,其中,所述预设压力范围根据预设用户坐下时所述座椅受到的压力值确定;
91.若是,则判定所述驾驶员为所述预设用户;
92.若否,则判定所述驾驶员不为所述预设用户,并推送通知消息给所述预设用户。
93.本技术还提供一种电子设备,所述电子设备为实体设备,所述电子设备包括:存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的所述智能座舱系统的人机交互设计方法的程序,所述智能座舱系统的人机交互设计方法的程序被处理器执行时可实现如上述的智能座舱系统的人机交互设计方法的步骤。
94.本技术还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有实现智能座舱系统的人机交互设计方法的程序,所述智能座舱系统的人机交互设计方法的程序被处理器执行时实现如上述的智能座舱系统的人机交互设计方法的步骤。
95.本技术还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述的智能座舱系统的人机交互设计方法的步骤。
96.本技术提供了一种智能座舱系统的人机交互设计方法、电子设备及介质,首先通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状,若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式;查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息,若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式控制所述智能座舱对应的车辆前往所述停车点,本技术通过对驾驶员的疲劳状态检测,自动跳转驾驶模式,并查询最近的停车点,以供驾驶员休息调整状态,从根本上克服了驾驶员的疲劳问题,很好地防止了因为疲劳驾驶导致的交通事故的发生,提高了疲劳驾驶状态下的安全性。
附图说明
97.此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本技术的实施例,并与说明书一起用于解释本技术的原理。
98.为了更清楚地说明本技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
99.图1为本技术智能座舱系统的人机交互设计方法第一实施例的流程示意图;
100.图2为本技术智能座舱系统的人机交互设计方法第二实施例的流程示意图;
101.图3为本技术智能座舱系统的人机交互设计方法第一实施例中的时间信息与车辆状态信息共同对应的智能座舱控制指令对应表;
102.图4为本技术智能座舱系统的人机交互设计装置组成示意图;
103.图5为本技术实施例中智能座舱系统的人机交互设计方法涉及的硬件运行环境的设备结构示意图。
104.本技术目的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
105.为使本技术的上述目的、特征和优点能够更加明显易懂,下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本技术一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其它实施例,均属于本技术保护的范围。
106.实施例一
107.随着人们对行车驾驶的安全性越加重视,其中各种交通事故中由于长时间疲劳驾驶导致的事故更是数不胜数,因此针对驾驶员的行车状态也有了对应的检测方法,但目前对于驾驶员处于疲劳状态时的处理办法主要是通过各种提神手段促使驾驶员恢复清醒状态,不能从根本上解决驾驶疲劳问题,从而导致疲劳驾驶的安全性过低。
108.本技术实施例提供一种智能座舱系统的人机交互设计方法,在本技术智能座舱系统的人机交互设计方法的第一实施例中,参照图1,所述智能座舱系统的人机交互设计方法包括:
109.步骤s10,通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态;
110.步骤s20,若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式;
111.步骤s30,查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息;
112.步骤s40,若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式控制所述智能座舱对应的车辆前往所述停车点。
113.在本实施例中,需要说明的是,所述辅助驾驶模式用于应对在行车状态中的突发情况,比如前方即将碰到障碍物,前方即将碰到车辆以及其他危险情况的紧急制动,还包括控制车速,打开灯光,转向或超车时自动开启转向灯等辅助操作,防止驾驶员因疲劳状态忽视细节操作;所述自动驾驶模式用于在所述驾驶员无法回应提示信息,即已经进入睡眠状态下的车辆控制,以安全将驾驶员带到停车点。
114.作为一种示例,步骤s10至步骤s40包括:通过智能座舱内的车载摄像机采集所述驾驶员的面部图像信息;通过所述驾驶员的面部图像信息判断所述驾驶员是否处于疲劳状态;若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式,以保证行车安全;查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息,以提示所述驾驶员是否需要前往最近的停车点;当接收到所述驾驶员的前往停车点的指令时,以可视化方式推送所述导航路线给所述驾驶员;若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式,控制所述智能座舱对应的车辆前往停靠最近的停车点。
115.所述通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否
存在疲劳状态的步骤包括:
116.步骤s11,通过所述智能座舱中的车载摄像头采集所述驾驶员的面部图像信息,并从所述面部图像信息中提取中的识别点;
117.步骤s12,根据预设头部模型、所述面部图像信息中的识别点确定所述驾驶员的头部姿态;
118.步骤s13,根据所述头部姿态、所述识别点确定所述驾驶员是否存在当前疲劳状态;
119.步骤s14,当检测到所述驾驶员存在当前疲劳状态的持续时间超过第二预设时间阈值时,判定所述驾驶员存在疲劳状态。
120.在本实施例中,需要说明的是,所述识别点用于表征所述面部图像信息中的各面部器官的位置信息,如眼睛,嘴巴等,其中所述头部姿态包括低头、仰头以及正视状态;所述第二预设时间阈值用于对所述驾驶员的疲劳状态进行精准检测,用于排除驾驶员短暂低头等其他干扰动作造成的误判。
121.作为一种示例,步骤s11至步骤s14包括:通过所述智能座舱中的车载摄像头采集所述驾驶员的面部图像信息,并从所述面部图像信息中提取所述驾驶员的面部器官对应的识别点,各所述识别点用于标识所述各面部的位置信息;根据各所述识别点的位置信息与预设头部模型,判断所述驾驶员的头部姿态为哪种姿态,其中,所述预设头部模型中包括各种头部姿态下个识别点的位置信息;根据所述头部姿态、所述识别点判断所述驾驶员的头部是否处于低头状态;若所述驾驶员的头部处于低头状态,则判定所述驾驶员处于当前疲劳状态;对所述驾驶员处于疲劳状态的持续时间进行记录,当所述持续时间超过第二预设时间阈值时,判定所述驾驶员存在疲劳状态。
122.所述根据预设头部模型、所述面部图像信息中的识别点确定所述驾驶员的头部姿态的步骤包括:
123.步骤s121,根据所述识别点中的各预设识别点,建立所述面部图像信息与所述预设头部模型的映射矩阵;
124.步骤s122,根据所述映射矩阵调整所述预设头部模型得到当前头部三维模型;
125.步骤s123,根据所述预设头部模型与所述当前头部三维模型确定所述驾驶员的头部姿态。
126.在本实施例中,需要说明的是,所述映射矩阵用于表征所述面部图像信息中的各预设识别点与所述预设头部模型中的各识别点的映射关系,用于生成所述当前同步三维模型。
127.作为一种示例,步骤s121至步骤s123包括:提取所述识别点中的各预设识别点,其中,各所述预设识别点用于表征所述面部图像信息中关键面部器官的位置;通过各所述预设识别点与所述预设头部模型建立所述面部图像信息与所述预设头部模型的映射矩阵;根据所述映射矩阵将各所述预设识别点映射到所述预设头部模型中,生成表征所述面部图像信息的当前头部三维模型;实时检测所述当前头部三维模型的运动情况,将所述当前头部三维模型与所述预设头部模型进行对比,得到所述当前头部三维模型的头部姿态。
128.所述根据所述头部姿态、所述识别点确定所述驾驶员是否存在当前疲劳状态的步骤包括:
129.步骤s131,根据各所述识别点的运动情况确定横向变化幅值与纵向变化幅值;
130.步骤s132,判断所述横向变化幅值与所述纵向变化幅值是否超过预设变化阈值;
131.步骤s133,若所述横向变化幅值或所述纵向变化幅值超过所述预设变化阈值,则判定所述驾驶员存在疲劳状态。
132.作为一种示例,步骤s131至步骤s133包括:对各所述识别点进行实时监测,得到各所述识别点的运动轨迹;从各所述运动轨迹中提取最大横向变化幅值与最大纵向变化幅值,将所述最大横向变化幅值与所述最大纵向变化幅值分别与预设变化阈值进行对比;若所述横向变化幅值或所述纵向变化幅值均超过所述预设变化阈值,则判定所述驾驶员存在疲劳状态;若所述横向变化幅值超过所述预设变化阈值,且所述纵向变化幅值未超过所述预设变化阈值,则判定所述驾驶员存在疲劳状态;若所述横向变化幅值未超过所述预设变化阈值,且所述纵向变化幅值超过所述预设变化阈值,则判定所述驾驶员存在疲劳状态;若所述横向变化幅值未超过所述预设变化阈值,且所述纵向变化幅值未超过所述预设变化阈值,则判定所述驾驶员不存在疲劳状态。
133.所述查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息的步骤包括:
134.步骤s31,通过车载导航软件查询所述智能座舱周边预设距离内的停车点对应的位置信息;
135.步骤s32,将从当前位置到各所述停车点的导航路线进行对比,得到预计驾驶时间最短的一个停车点;
136.步骤s33,将从所述当前位置到所述停车点之间的导航路线推送给所述驾驶员,并发出语音提示。
137.在本实施例中,需要说明的是,所述语音提示内容包括是否需要到最近停车点休息;所述预设距离可以为10公里,以避免查到距离过远的停车点,造成查询时间过长。
138.作为一种示例,步骤s31至步骤s33包括:基于所述车载导航软件查询所述预设距离内的附近各停车点的位置信息;根据各所述位置信息查询得到从当前位置到各所述停车点的路线信息;统计各所述路线信息需要的驾驶时间,并从中选取驾驶时间最短的导航路线以可视化方式推送给所述驾驶员,并通过语音提示所述驾驶员是否需要到最近停车点休息。
139.本技术实施例提供了一种智能座舱系统的人机交互设计方法,首先通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状,若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式;查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息,若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式控制所述智能座舱对应的车辆前往所述停车点,本技术实施例通过对驾驶员的疲劳状态检测,自动跳转驾驶模式,并查询最近的停车点,以供驾驶员休息调整状态,从根本上克服了驾驶员的疲劳问题,很好地防止了因为疲劳驾驶导致的交通事故的发生,提高了疲劳驾驶状态下的安全性。
140.实施例二
141.进一步地,基于本技术第一实施例,在本技术另一实施例中,与上述实施例一相同或相似的内容,可以参考上文介绍,后续不再赘述。在此基础上,参照图2,在所述通过智能
座舱内的车载摄像机对所述驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态的步骤之前,还包括:
142.步骤a10,通过可视化输入界面获取用户输入的预设初始指令,其中,所述预设初始指令包括各时间信息以及各车辆状态信息共同对应的各智能座舱控制指令,所述智能座舱控制指令至少包括灯光控制指令、音乐控制指令、空调控制指令、车窗控制指令、雨刮器控制指令以及蓝牙控制指令其中的一种;
143.步骤a20,当检测到所述驾驶员进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令,控制所述智能座舱执行对应的初始操作。
144.在本实施例中,需要说明的是,所述可视化输入界面可以在智能座舱的显示屏上,也可以在于所述智能座舱连接的移动设备上,用于供用户根据需要打造个性化设置,通过自动控制满足用户的各种需求,实现无手动操作。所述智能座舱为汽车智能座舱,所述时间信息包括当前日期以及当前时刻,所述当前日期用于判断当前季节,对温度进行预估;所述当前日期以及所述当前时刻共同用于判断当前光照条件,以指导灯光控制;所述预设初始指令中包含各时间信息与各车辆状态信息对应的初始指令,例如,参照示例图3,时间信息为12月1日17点整,车辆状态信息包括车内温度32℃、车辆运行中以及车体在雨中,无光照条件,则对应的初始指令为开启空调并设置温度为26℃、开启车前照灯、开启雨刮器,开启音乐,开启蓝牙,其中,所述预设初始指令可以根据用户的个人需求自行设置。
145.作为一种示例,步骤a10至步骤a20包括:通过连接所述智能座舱以及预设用户的移动设备,向所述预设用户推送可视化输入界面,其中,所述预设用户为车主或所述车主设置的其他用户;接收所述预设用户通过所述可视化输入界面输入的预设初始指令,其中,所述预设初始指令中至少包括一组时间信息、车辆状态信息以及对应的智能座舱控制指令,用于在所述已有当前时间信息与当前车辆状态信息的情况下查询到对应的智能座舱控制指令,所述智能座舱控制指令至少包括灯光控制指令、音乐控制指令、空调控制指令、车窗控制指令、雨刮器控制指令以及蓝牙控制指令其中的一种;通过对智能座舱中的座椅进行压力检测,判断是否有驾驶员进入所述智能座舱;当检测到所述座椅收到的压力值超过第一预设阈值时,判定有驾驶员进入智能座舱;根据当前时间信息以及当前车辆状态信息,在预设初始指令中查询对应的初始指令;根据所述初始指令控制所述智能座舱中各座舱设备执行所述初始指令对应的交互操作。
146.其中,所述当检测到用户进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令控制所述智能座舱执行对应的初始操作的步骤包括:
147.步骤a21,对所述智能座舱中的座椅进行压力检测;
148.步骤a22,当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱;
149.步骤a23,根据所述当前时间信息以及所述当前车辆状态信息,在所述预设初始指令中查询到对应的智能座舱控制指令,其中,所述当前车辆状态信息至少包括温度信息,车辆运行信息以及车体感应信息中的一种;
150.步骤a24,根据所述智能座舱控制指令,控制所述智能座舱执行所述智能座舱控制指令对应的初始操作。
151.在本实施例中,需要说明的是,所述第一预设压力阈值用于判断是否有驾驶员坐
上所述座椅,用于避免比如用手按压座椅等其他动作带来的干扰;对所述座椅进行压力检测所用到的工具为压力传感器,用于准确地将驾驶员坐在所述座椅上时对所述座椅带来的压力测量出来。
152.作为一种示例,步骤a21至步骤a24包括:通过压力传感器对所述智能座舱中的座椅进行压力检测,获得座椅压力值;当所述座椅压力值不超过第一预设压力阈值时,继续对所述座椅进行持续检测;当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱;调用所述当前时间信息以及所述当前车辆状态信息,在所述预设初始指令中检索所述当前时间信息和所述当前车辆状态信息共同对应的智能座舱控制指令,其中,所述当前车辆状态信息包括温度信息,车辆运行信息以及车体感应信息;根据所述智能座舱控制指令控制所述智能座舱中各座舱设备执行所述智能座舱控制指令对应的互动操作。
153.在所述当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱的步骤之后,还包括:
154.步骤b10,判断所述座椅受到的压力值是否在预设压力范围内,其中,所述预设压力范围根据预设用户坐下时所述座椅受到的压力值确定;
155.步骤b20,若是,则判定所述驾驶员为所述预设用户;
156.步骤b30,若否,则判定所述驾驶员不为所述预设用户,并推送通知消息给所述预设用户。
157.在本实施例中,需要说明的是,所述预设压力范围用于根据所述预设用户坐下时所述座椅收到的压力值判断所述驾驶员是否为所述预设用户,以防止其他人员进入所述智能座舱,提高智能座舱的安全性;所述推送通知消息的方式可以通过所述智能座舱与所述预设用户的移动设备的连接将推送通知到所述预设用户的移动设备上。
158.作为一种示例,步骤b10至步骤b30包括:通过检测所述座椅受到的座椅压力值,判断所述座椅压力值是否在预设压力范围内,其中,所述预设压力范围为所述预设用户坐下时所述座椅受到得到压力值变动范围;若所述座椅压力值在预设压力范围内,则判定所述驾驶员为所述预设用户;若所述座椅压力值不在预设压力范围内,则判定所述驾驶员不为所述预设用户,并通过所述智能座舱与所述预设用户的移动设备之间的连接通道,推送通知消息给所述预设用户。
159.在所述当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱的步骤之后,还包括:
160.步骤c10,采集所述驾驶员的面部图像信息,根据所述面部图像信息判断所述驾驶员是否为预设用户;
161.步骤c20,若否,则推送通知消息给所述预设用户。
162.在本实施例中,需要说明的是,采集所述面部图像信息的方式可以为所述智能座舱内部的摄像头,通过采集所述驾驶员的面部图像信息,进而提取所述面部图像信息中的特征信息,用于判断所述驾驶员的身份,提高所述智能座舱的安全性。
163.作为一种示例,步骤c10至步骤c20包括:通过所述座舱内部的摄像头采集所述驾驶员的面部图像信息;提取所述面部图像信息的面部特征信息,根据内置的所述预设用户对应的面部特征信息对所述面部图像信息的面部特征信息进行对比;若不一致,则判定所
述驾驶员不为所述预设用户,并通过向所述预设用户对应的移动设备推送消息进行通知;若一致,则判定所述驾驶员为所述预设用户。
164.其中,在所述当检测到所述驾驶员进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令,控制所述智能座舱执行对应的初始操作的步骤之后,包括:
165.步骤d10,当检测到所述驾驶员发出的交互指令语音,通过声纹认证模型对所述交互指令语音进行识别,判断所述交互指令语音是否符合预设声纹;
166.步骤d20,若所述交互指令语音符合所述预设声纹,则将所述交互指令语音的声纹认证状态置为声纹认证通过;
167.步骤d30,若所述交互指令语音不符合所述预设声纹,则将所述交互指令语音的声纹认证状态置为声纹认证失败,并推送通知消息给预设用户。
168.在本实施例中,需要说明的是,所述声纹认证模型是事先通过语音训练集与语音测试集训练得到的,用于识别语音信息中的声纹特征,再与预先录入的所述预设用户的语音信息的声纹特征进行对比,以确定所述驾驶员的身份。
169.作为一种示例,步骤d10至步骤d30包括:采集所述智能座舱中的声音信息;对所述声音信息进行识别,判断是否为所述驾驶员发出的交互指令语音;若所述声音信息为所述驾驶员发出的交互指令语音,则通过声纹认证模型提取所述交互指令语音中的声纹特征;将所述声纹特征与预设声纹对应的声纹特征进行匹配;若所述声纹特征与预设声纹对应的声纹特征匹配成功,则判定所述交互指令语音符合所述预设声纹,并将所述交互指令语音的声纹认证状态置为声纹认证通过;若所述声纹特征与预设声纹对应的声纹特征匹配失败,则判定所述交互指令语音不符合所述预设声纹,并将所述交互指令语音的声纹认证状态置为声纹认证通过失败,向预设用户对应的移动推送通知消息。
170.其中,在所述将所述交互指令语音的声纹认证状态置为声纹认证通过之后的步骤还包括:
171.步骤d21,提取所述交互指令语音中的交互指令,并根据所述交互指令查询对应的座舱设备;
172.步骤d22,根据所述交互指令控制所述座舱设备执行所述交互指令对应的交互操作。
173.作为一种示例,步骤d21至步骤d22包括:根据预设交互指令在所述交互指令语音中提取交互指令,根据所述交互指令查询对应的各座舱设备,其中,所述座舱设备至少包括灯具、音乐播放器、空调、车窗、蓝牙系统以及雨刮器其中的一种;根据所述交互指令控制各所述座舱设备执行所述交互指令对应的交互操作,以完成人机交互。
174.在所述根据所述交互指令语音控制所述智能座舱执行对应的交互操作的步骤之后,还包括:
175.步骤d23,当检测到所述智能座舱的座椅受到的压力值减少幅值超过第二预设压力阈值时,向所述驾驶员推送语音提示信息,其中,所述语音提示信息用于询问所述驾驶员是否需要关闭所述智能座舱中的各座舱设备;
176.步骤d24,当接收到所述驾驶员发出的设备关闭指令时,初始化所述智能座舱中各座舱设备。
177.在本实施例中,需要说明的是,所述第二预设压力阈值用于判断所述驾驶员是否
已离开所述座椅,避免所述驾驶员因为调整坐姿等其他动作造成的座椅压力值改变产生误判;向所述驾驶员推送语音提示信息的目的是为了确认所述驾驶员已经结束乘坐,而不是因为其他原因暂时离开所述智能座舱。
178.作为一种示例,步骤d23至步骤d24包括:持续对所述智能座舱中的座椅进行压力值变化检测;当检测到所述座椅受到的压力值下降幅值超过所述第二预设压力阈值时,通过所述智能座舱中的内部扬声器向所述驾驶员发出语音提示,其中,所述语音提示信息用于询问所述驾驶员是否需要关闭所述智能座舱中的各座舱设备;通过所述智能座舱中的麦克风持续接收环境声音信息;当从所述环境声音信息中识别到设备关闭指令时,初始化所述智能座舱中各座舱设备,以将所述智能座舱恢复到所述驾驶员未进入时的状态。
179.本技术实施例提供了一种智能座舱系统的人机交互设计方法,首先通过可视化输入界面获取用户输入的预设初始指令,其中,所述预设初始指令包括各时间信息以及各车辆状态信息共同对应的各智能座舱控制指令,所述智能座舱控制指令至少包括灯光控制指令、音乐控制指令、空调控制指令、车窗控制指令、雨刮器控制指令以及蓝牙控制指令其中的一种,当检测到所述驾驶员进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令,控制所述智能座舱执行对应的初始操作,本技术实施例通过预设初始指令,根据当前时间与当前车辆状态进行自动初始操作,将智能座舱内的状态调整为适合当前情况的模式,免去了用户手动操作的步骤,提高了所述智能座舱的安全性,综上所述,本技术实施例所运用的方案很好地克服了现有技术中需要手动操作调整参数的技术缺陷,提高了智能座舱自动化程度。
180.实施例三
181.本技术实施例还提供一种智能座舱系统的人机交互设计装置,所述智能座舱系统的人机交互设计装置应用于智能座舱系统的人机交互设计设备,参照图4,所述智能座舱系统的人机交互设计装置包括:
182.疲劳检测模块,用于通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态;
183.辅助驾驶模块,用于若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式;
184.导航模块,用于查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息;
185.自动驾驶模块,用于若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式控制所述智能座舱对应的车辆前往所述停车点。
186.可选地,所述疲劳检测模块还用于:
187.通过所述智能座舱中的车载摄像头采集所述驾驶员的面部图像信息,并从所述面部图像信息中提取中的识别点;
188.根据预设头部模型、所述面部图像信息中的识别点确定所述驾驶员的头部姿态;
189.根据所述头部姿态、所述识别点确定所述驾驶员是否存在当前疲劳状态;
190.当检测到所述驾驶员存在当前疲劳状态的持续时间超过第二预设时间阈值时,判定所述驾驶员存在疲劳状态。
191.可选地,所述疲劳检测模块还用于:
192.根据所述识别点中的各预设识别点,建立所述面部图像信息与所述预设头部模型
的映射矩阵;
193.根据所述映射矩阵调整所述预设头部模型得到当前头部三维模型;
194.根据所述预设头部模型与所述当前头部三维模型确定所述驾驶员的头部姿态。
195.可选地,所述疲劳检测模块还用于:
196.根据各所述识别点的运动情况确定横向变化幅值与纵向变化幅值;
197.判断所述横向变化幅值与所述纵向变化幅值是否超过预设变化阈值;
198.若所述横向变化幅值或所述纵向变化幅值超过所述预设变化阈值,则判定所述驾驶员存在疲劳状态。
199.可选地,所述导航模块还用于:
200.通过车载导航软件查询所述智能座舱周边预设距离内的停车点对应的位置信息;
201.将从当前位置到各所述停车点的导航路线进行对比,得到预计驾驶时间最短的一个停车点;
202.将从所述当前位置到所述停车点之间的导航路线推送给所述驾驶员,并发出语音提示。
203.可选地,所述初始模块还用于:
204.对所述智能座舱中的座椅进行压力检测;
205.当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱;
206.根据所述当前时间信息以及所述当前车辆状态信息,在所述预设初始指令中查询到对应的智能座舱控制指令,其中,所述当前车辆状态信息至少包括温度信息,车辆运行信息以及车体感应信息中的一种;
207.根据所述智能座舱控制指令,控制所述智能座舱执行所述智能座舱控制指令对应的初始操作。
208.可选地,所述初始模块还用于:
209.判断所述座椅受到的压力值是否在预设压力范围内,其中,所述预设压力范围根据预设用户坐下时所述座椅受到的压力值确定;
210.若是,则判定所述驾驶员为所述预设用户;
211.若否,则判定所述驾驶员不为所述预设用户,并推送通知消息给所述预设用户。
212.可选地,所述初始模块还用于:
213.采集所述驾驶员的面部图像信息,根据所述面部图像信息判断所述驾驶员是否为预设用户;
214.若否,则推送通知消息给所述预设用户。
215.可选地,所述认证模块还用于:
216.当检测到所述驾驶员发出的交互指令语音,通过声纹认证模型对所述交互指令语音进行识别,判断所述交互指令语音是否符合预设声纹;
217.若所述交互指令语音符合所述预设声纹,则将所述交互指令语音的声纹认证状态置为声纹认证通过;
218.若所述交互指令语音不符合所述预设声纹,则将所述交互指令语音的声纹认证状态置为声纹认证失败,并推送通知消息给预设用户。
219.可选地,所述执行模块还用于:
220.提取所述交互指令语音中的交互指令,并根据所述交互指令查询对应的座舱设备;
221.根据所述交互指令控制所述座舱设备执行所述交互指令对应的交互操作。
222.可选地,所述执行模块还用于:
223.当检测到所述智能座舱的座椅受到的压力值减少幅值超过第二预设压力阈值时,向所述驾驶员推送语音提示信息,其中,所述语音提示信息用于询问所述驾驶员是否需要关闭所述智能座舱中的各座舱设备;
224.当接收到所述驾驶员发出的设备关闭指令时,初始化所述智能座舱中各座舱设备。
225.可选地,智能座舱系统的人机交互设计装置还包括初始化模块:
226.可选地,所述初始化模块还用于:
227.通过可视化输入界面获取用户输入的预设初始指令,其中,所述预设初始指令包括各时间信息以及各车辆状态信息共同对应的各智能座舱控制指令,所述智能座舱控制指令至少包括灯光控制指令、音乐控制指令、空调控制指令、车窗控制指令、雨刮器控制指令以及蓝牙控制指令其中的一种;
228.当检测到所述驾驶员进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令,控制所述智能座舱执行对应的初始操作。
229.可选地,所述初始化模块还用于:
230.通过可视化输入界面获取用户输入的预设初始指令,其中,所述预设初始指令包括各时间信息以及各车辆状态信息共同对应的各智能座舱控制指令,所述智能座舱控制指令至少包括灯光控制指令、音乐控制指令、空调控制指令、车窗控制指令、雨刮器控制指令以及蓝牙控制指令其中的一种;
231.当检测到所述驾驶员进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令,控制所述智能座舱执行对应的初始操作。
232.可选地,所述初始化模块还用于:
233.判断所述座椅受到的压力值是否在预设压力范围内,其中,所述预设压力范围根据预设用户坐下时所述座椅受到的压力值确定;
234.若是,则判定所述驾驶员为所述预设用户;
235.若否,则判定所述驾驶员不为所述预设用户,并推送通知消息给所述预设用户。
236.实施例四
237.本技术实施例提供一种电子设备,电子设备包括:至少一个处理器;以及,与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行上述实施例一中的智能座舱系统的人机交互设计方法。
238.下面参考图5,其示出了适于用来实现本公开实施例的电子设备的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、pda(个人数字助理)、pad(平板电脑)、pmp(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字tv、台式计算机等等的固定终端。图5示出的电子设备
仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
239.如图5所示,电子设备可以包括处理装置(例如中央处理器、图形处理器等),其可以根据存储在只读存储器(rom)中的程序或者从存储装置加载到随机访问存储器(ram)中的程序而执行各种适当的动作和处理。在ram中,还存储有电子设备操作所需的各种程序和数据。处理装置、rom以及ram通过总线彼此相连。输入/输出(i/o)接口也连接至总线。
240.通常,以下系统可以连接至i/o接口:包括例如触摸屏、触摸板、键盘、鼠标、图像传感器、麦克风、加速度计、陀螺仪等的输入装置;包括例如液晶显示器(lcd)、扬声器、振动器等的输出装置;包括例如磁带、硬盘等的存储装置;以及通信装置。通信装置可以允许电子设备与其他设备进行无线或有线通信以交换数据。虽然图中示出了具有各种系统的电子设备,但是应理解的是,并不要求实施或具备所有示出的系统。可以替代地实施或具备更多或更少的系统。
241.特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置从网络上被下载和安装,或者从存储装置被安装,或者从rom被安装。在该计算机程序被处理装置执行时,执行本公开实施例的方法中限定的上述功能。
242.本技术提供的电子设备,采用上述实施例中的智能座舱系统的人机交互设计方法,解决了疲劳驾驶状态下的安全性低的技术问题。与现有技术相比,本技术实施例提供的电子设备的有益效果与上述实施例一提供的智能座舱系统的人机交互设计方法的有益效果相同,且该电子设备中的其他技术特征与上一实施例方法公开的特征相同,在此不做赘述。
243.应当理解,本公开的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式的描述中,具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
244.以上所述,仅为本技术的具体实施方式,但本技术的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本技术揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本技术的保护范围之内。因此,本技术的保护范围应以所述权利要求的保护范围为准。
245.实施例五
246.本实施例提供一种计算机可读存储介质,具有存储在其上的计算机可读程序指令,计算机可读程序指令用于执行上述实施例一中的智能座舱系统的人机交互设计的方法。
247.本技术实施例提供的计算机可读存储介质例如可以是u盘,但不限于电、磁、光、电磁、红外线、或半导体的系统、系统或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、系统或者器件使用或者与其结合使用。计算机可读存储介质上包含的
程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、rf(射频)等等,或者上述的任意合适的组合。
248.上述计算机可读存储介质可以是电子设备中所包含的;也可以是单独存在,而未装配入电子设备中。
249.上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被电子设备执行时,使得电子设备:通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态;若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式;查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息;若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式控制所述智能座舱对应的车辆前往所述停车点。可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c++,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
250.附图中的流程图和框图,图示了按照本技术各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
251.描述于本公开实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,模块的名称在某种情况下并不构成对该单元本身的限定。
252.本技术提供的计算机可读存储介质,存储有用于执行上述智能座舱系统的人机交互设计方法的计算机可读程序指令,解决了疲劳驾驶状态下的安全性低的技术问题。与现有技术相比,本技术实施例提供的计算机可读存储介质的有益效果与上述实施例提供的智能座舱系统的人机交互设计方法的有益效果相同,在此不做赘述。
253.实施例六
254.本技术还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述的智能座舱系统的人机交互设计方法的步骤。
255.本技术提供的计算机程序产品解决了疲劳驾驶状态下的安全性低的技术问题。与现有技术相比,本技术实施例提供的计算机程序产品的有益效果与上述实施例提供的智能座舱系统的人机交互设计方法的有益效果相同,在此不做赘述。
256.以上仅为本技术的优选实施例,并非因此限制本技术的专利范围,凡是利用本申
请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本技术的专利处理范围内。

技术特征:
1.一种智能座舱系统的人机交互设计方法,其特征在于,所述智能座舱系统的人机交互设计方法包括:通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态;若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式;查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息;若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式控制所述智能座舱对应的车辆前往所述停车点。2.如权利要求1所述智能座舱系统的人机交互设计方法,其特征在于,所述通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态的步骤包括:通过所述智能座舱中的车载摄像头采集所述驾驶员的面部图像信息,并从所述面部图像信息中提取中的识别点;根据预设头部模型、所述面部图像信息中的识别点确定所述驾驶员的头部姿态;根据所述头部姿态、所述识别点确定所述驾驶员是否存在当前疲劳状态;当检测到所述驾驶员存在当前疲劳状态的持续时间超过第二预设时间阈值时,判定所述驾驶员存在疲劳状态。3.如权利要求2所述智能座舱系统的人机交互设计方法,其特征在于,所述根据预设头部模型、所述面部图像信息中的识别点确定所述驾驶员的头部姿态的步骤包括:根据所述识别点中的各预设识别点,建立所述面部图像信息与所述预设头部模型的映射矩阵;根据所述映射矩阵调整所述预设头部模型得到当前头部三维模型;根据所述预设头部模型与所述当前头部三维模型确定所述驾驶员的头部姿态。4.如权利要求2所述智能座舱系统的人机交互设计方法,其特征在于,所述根据所述头部姿态、所述识别点确定所述驾驶员是否存在当前疲劳状态的步骤包括:根据各所述识别点的运动情况确定横向变化幅值与纵向变化幅值;判断所述横向变化幅值与所述纵向变化幅值是否超过预设变化阈值;若所述横向变化幅值或所述纵向变化幅值超过所述预设变化阈值,则判定所述驾驶员存在疲劳状态。5.如权利要求1所述智能座舱系统的人机交互设计方法,其特征在于,所述查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息的步骤包括:通过车载导航软件查询所述智能座舱周边预设距离内的停车点对应的位置信息;将从当前位置到各所述停车点的导航路线进行对比,得到预计驾驶时间最短的一个停车点;将从所述当前位置到所述停车点之间的导航路线推送给所述驾驶员,并发出语音提示。6.如权利要求1所述智能座舱系统的人机交互设计方法,其特征在于,在所述通过智能座舱内的车载摄像机对所述驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态的步骤之前,还包括:
通过可视化输入界面获取用户输入的预设初始指令,其中,所述预设初始指令包括各时间信息以及各车辆状态信息共同对应的各智能座舱控制指令,所述智能座舱控制指令至少包括灯光控制指令、音乐控制指令、空调控制指令、车窗控制指令、雨刮器控制指令以及蓝牙控制指令其中的一种;当检测到所述驾驶员进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令,控制所述智能座舱执行对应的初始操作。7.如权利要求6所述智能座舱系统的人机交互设计方法,其特征在于,所述当检测到用户进入智能座舱时,根据当前时间信息、当前车辆状态信息以及预设初始指令控制所述智能座舱执行对应的初始操作的步骤包括:对所述智能座舱中的座椅进行压力检测;当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱;根据所述当前时间信息以及所述当前车辆状态信息,在所述预设初始指令中查询到对应的智能座舱控制指令,其中,所述当前车辆状态信息至少包括温度信息,车辆运行信息以及车体感应信息中的一种;根据所述智能座舱控制指令,控制所述智能座舱执行所述智能座舱控制指令对应的初始操作。8.如权利要求7所述智能座舱系统的人机交互设计方法,其特征在于,在所述当检测到所述座椅受到的压力值超过第一预设压力阈值时,判定所述驾驶员已进入所述智能座舱的步骤之后,还包括:判断所述座椅受到的压力值是否在预设压力范围内,其中,所述预设压力范围根据预设用户坐下时所述座椅受到的压力值确定;若是,则判定所述驾驶员为所述预设用户;若否,则判定所述驾驶员不为所述预设用户,并推送通知消息给所述预设用户。9.一种电子设备,其特征在于,所述电子设备包括:至少一个处理器;以及,与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至8中任一项所述的智能座舱系统的人机交互设计方法的步骤。10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有实现智能座舱系统的人机交互设计方法的程序,所述实现智能座舱系统的人机交互设计方法的程序被处理器执行以实现如权利要求1至8中任一项所述智能座舱系统的人机交互设计方法的步骤。

技术总结
本申请公开了一种智能座舱系统的人机交互设计方法、电子设备及介质,所述智能座舱系统的人机交互设计方法包括:通过智能座舱内的车载摄像机对驾驶员进行疲劳检测,判断所述驾驶员是否存在疲劳状态;若检测到所述驾驶员存在疲劳状态,则开启辅助驾驶模式;查询距离所述智能座舱最近的停车点的导航路线,并向所述驾驶员推送提示信息;若在第一预设时间阈值后未接收到所述驾驶员的回应信息,则开启自动驾驶模式控制所述智能座舱对应的车辆前往所述停车点。本申请解决了疲劳驾驶状态下的安全性低的技术问题。低的技术问题。低的技术问题。


技术研发人员:曾伟 张辉
受保护的技术使用者:锦图计算技术(深圳)有限公司
技术研发日:2022.09.07
技术公布日:2023/6/26
版权声明

本文仅代表作者观点,不代表航家之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)

航空之家 https://www.aerohome.com.cn/

飞机超市 https://mall.aerohome.com.cn/

航空资讯 https://news.aerohome.com.cn/

分享:

扫一扫在手机阅读、分享本文

相关推荐