视觉识别系统*
视觉识别系统*
系统描述：以视觉为中心的主动式交互，拓展手势识别、人脸识别、情绪识别等视觉能力。为座舱赋予察言观色的能力，时刻思考用户需求，「主动」为用户提供服务。
情景模式定义
|
功能
|
使用场景描述
|
|||
|
上车问候
|
每天首次上车，会根据时间及识别到的性别进行语音问候，如“兄台，早上好，剑之所至，心之所往，终身相伴”。
|
|||
|
疲劳驾驶缓解
|
通过打哈欠、眼睛睁闭时间判断驾驶员疲劳状态并发出提醒。
1.服务区提醒：有导航路线时，发现前方有服务区，发起语音交互提醒去服务区休息。
2.轻度疲劳----TTS提醒：发起语音交互，如“仙女姐姐，跟我一起扭扭脖子，做个深呼吸？”
3.中度疲劳----模拟来电：调用正常来电话界面，模拟来电话情况，用户点击接听或挂断会发起语音交互解释。
4.重度疲劳----提神模式：发起语音交互“即将为您开启提神模式”，若用户未点击取消提神模式，就会进行车窗（车窗本身开启状态就不会再控制）、空调调节（空调处于前除霜状态也不会控制）以及播放音乐。
|
|||
|
分心提醒
|
分心提醒
|
视线长时间未正视车辆前方时，提醒驾驶员专心驾驶。
|
||
|
高速路口分心提醒
|
在导航高速出口时，会检测驾驶员注意力情况，若驾驶员没有看中控导航并且也没看右后视镜区域，并且驾驶员没有打转向灯、未进行明显的减速，则通过车机进行声音报警和动效报警 ，同时车机转向信息放大闪烁显示。
|
|||
|
手机接听电话提醒
|
主驾接听电话提醒
|
检测到驾驶员手机接打电话，发起语音交互，提醒驾驶员不要打电话，专心开车。
|
||
|
主驾情绪接听电话
|
检测到驾驶员长时间打电话并结合挂电话时的情绪提醒驾驶员不要长时打电话，例如“happy ，你刚刚在跟谁煲电话粥，都不注意自己的安全了, 我有点小生气”。
|
|||
|
副驾接听电话提醒
|
检测到副驾驶手机接打电话，副驾降低媒体音量。
|
|||
|
抽烟检测
|
检测到驾驶员或副驾抽烟，如空调处于开启状态，则打开外循环，同时对应一侧车窗打开。（无防夹车窗无此功能）。
|
|||
|
人脸识别
|
识别预先录入的人脸ID，实现用户无感下的车辆账户登录。
|
|||
|
车内拍照
|
车内拍照
|
用户可以通过说“我要拍照”的方式，进行车内拍照。同时，照片还能通过车机分享到手机；结合头部位置定位、人脸识别到用户的年龄、性别情绪等，给于用户乐趣性的拍照提示（如，祖国的花朵、小公主、小王子、小哥哥、小姐姐、高富帅、白富美、萌妹子等）。
|
||
|
面部识别显示
|
当识别到用户所拍摄的照片有闭眼的情况，会智能的提示用户是否重新拍摄。
|
|||
|
手势识别
|
通过识别手势控制应用，如拍照，上一曲/下一曲等
|
|||
|
儿童模式
|
儿童上车问候
|
识别到儿童上车后给予问候。
|
||
|
视线交互
|
视线控制
|
通过视线方向与语音指令多模控制，例如视线位于空调出风口去可直接控制开关。
|
||
|
视线亮屏
|
车机夜晚状态下，注视车机即可提高屏幕亮度；车机熄屏状态下注视车机可点亮屏幕。
|
|||
|
无麦K歌
|
用户无需使用手持的麦克风，可以直接使用车辆本身的麦克风和音箱体验到KTV唱歌。
|
|||
注意：视觉功能均需在ON挡条件下实现
一.上车问候
功能描述：
每天首次上车，会根据时间及识别到的性别进行语音问候，如“兄台，早上好，剑之所至，心之所往，终身相伴”。
上车问候场景描述
|
上车问候
|
触发条件：a&b&c&d&e
|
a：当天首次上车
b：识别到主驾驶座位有人
c：档位需要在P档
d：上车1分钟内
e：视觉模块识别出性别、年龄、情绪
|
||
|
执行策略：a
|
a：TTS播报上车问候，问候对应列表如下
|
|||
TTS播放列表
|
用户特征
|
播放内容
|
备注
|
||
|
男
|
Hi，上午好，希望每天都有小菱陪你出发；
Hi，中午好，小菱希望你工作顺利样样好；
Hi，下午好，美好如意的日子里，祝福送给小菱牵挂的你；
Hi，晚上好，每当黑夜降临，就是小菱想你的开始；
Hi，凌晨了，长夜漫漫，驾车出行也要注意安全哦。
|
上午：5:00-11:00；
中午：11:00-13:00；下午：13:00-19:00；晚上：19：00-24:00；凌晨：00:00-5:00。
|
||
|
女
|
Hi，上午好，小菱为你送来清晨的第一缕阳光，愿你幸福快乐每一天；
Hi，中午好，最真诚的问候送给你，小菱祝你心情美美哒；
Hi，下午好，送您一杯下午茶，小菱希望你能喝出一天好心情；
Hi，晚上好，天上的星星眨眼睛，不眠的夜里总有小菱在想着你；
Hi，凌晨了，夜色渐深，驾车出行也不要忘了注意安全哦。
|
|||
二.疲劳驾驶缓解
功能描述：
通过打哈欠、眼睛睁闭时间判断驾驶员疲劳状态并发出提醒。提神模式提醒条件：车窗或空调至少有一个可以控制。车窗可以控制条件为车窗未开启状态且防夹生效。空调可以控制条件为空调为非前除霜状态。在倒车、全景、来电通话状态、语音状态、TTS状态、主驾抽烟状态，前排打电话状态，疲劳提醒不触发。30分钟之内轻度、中度和重度疲劳提醒最多各触发一次，三种疲劳总共最多触发3次。
疲劳策略说明：
a.轻度疲劳：根据上下嘴唇高度与人脸比值/嘴部高度与宽比值两个参数进行判断。经过滑动窗口中求均值，再与阈进行判断。当前工程为1s，阈值分别为0.21，0.81。
b.中度疲劳：目前工程中时间窗口设置5s，累计闭眼时长设为1.5s。即在5s窗口内，多次闭眼使得累计闭眼时长达到1.5s 即可触发。
c.重度疲劳：目前持续闭眼设置窗口为1.6s，累计闭眼时长阈值为1.5s。一段时间内闭眼占比大， 复用5s时间窗口，设置系数0.6，即累计闭眼时长阈值为3s。
疲劳驾驶缓解场景描述
|
（1）进入服务区提醒
|
触发条件：a&b&c&d&e
|
a：车速≥30km/h
b：视觉模块识别出疲劳特征触发
c：车辆处于导航
d：在高速路上，前方10公里有服务区
e：不处于以下状态：倒车、全景、来电通话状态、语音状态、TTS状态、主驾抽烟状态，前排主驾打电话状态
|
||
|
执行策略：a
|
a：TTS播报“前方即将到达服务区，识别到您疲劳，建议前往服务区休息”
|
|||
|
（2）进入轻度疲劳提醒
|
触发条件：a&b&c&d
|
a：车速≥30km/h
b：识别到轻度疲劳
c：不处于以下状态：倒车、全景、来电通话状态、语音状态、TTS状态、主驾抽烟状态，前排主驾打电话状态、智能行车辅助状态
d：30min内轻度疲劳未触发过
|
||
|
执行策略：(a|b)&c&d
|
a：若当前无音频播放，TTS播报轻度疲劳提醒“主人，你看起来累啦，注意开车安全哦，和我一起听首歌，做个深呼吸吧”，同时开始播放舒缓音乐1min
b：若当前有播放音频，仅TTS播报轻度疲劳提醒“主人，你看起来累啦，注意开车安全哦”
c：TTS播报“需要我帮你打开提神模式吗”——语音回答确认“需要”，可开启空调冷风吹脸（温度1档，风量6档）模式；不回答或语音回答“不需要”则不操作。
d：五菱小子做疲劳相应动作
|
|||
|
（3）退出轻度疲劳提醒
|
触发条件：a|b
|
a：已触发轻度疲劳状态下，方向盘控制按键上的“返回键”按键按动
b：60s超时
|
||
|
执行策略：a&b
|
a：暂停播放舒缓音乐（触发轻度疲劳时，无音频播放的情况下）
b：若空调未被调节，则复原至开启前状态；若调节过则保持当前档位
|
|||
|
（4）进入中度疲劳提醒
|
触发条件：a&b&c&d
|
a：车速≥30km/h
b：识别到中度疲劳
c：不处于以下状态：倒车、全景、来电通话状态、语音状态、TTS状态、主驾抽烟状态，前排打主驾电话状态、智能行车辅助状态
d：30min内中度疲劳未触发过
|
||
|
执行策略：a&b
|
a：车机显示模拟来电界面，显示时长60s，来电铃声为固定铃声
b：五菱小子做疲劳相应动作
|
|||
 ”进入中度疲劳提醒“模拟来电界面如上图所示，（参考车机来电界面），建议复用蓝牙来电界面。
|
||||
|
（5）退出中度疲劳提醒
|
触发条件：a|b|c
|
a：已触发中度疲劳状态下，方向盘控制按键上的“返回键”按键按动
b：60s超时
c：接通或挂断电话（手动点击显示屏操作）
|
||
|
执行策略：a&b
|
a：TTS播报“检测到您疲劳，刚刚的来电是个玩笑，提醒您注意行车安全哦”
b：退出模拟来电界面
|
|||
|
（6）进入重度疲劳提醒
|
触发条件：a&b&c&d
|
a：车速≥30km/h
b：识别到重度疲劳
c：不处于以下状态：倒车、全景、来电通话状态、语音状态、TTS状态、主驾抽烟状态，前排主驾打电话状态
d：30min内重度疲劳未触发过
|
||
|
执行策略：(a|b|c)&d
|
a：若30km/h≤车速≤60km/h，主驾车窗全开，打开空调冷风吹脸（温度1档，风量6档）（档位处于前除霜状态/吹脚吹窗模式则不操作空调），播报“即将为您开启提神模式”，开始播放舒缓音乐1min；（若雨刮打开，则不开窗）
b：若60km/h<车速≤90km/h，主驾车窗打开25%，打开空调冷风吹脸（温度1档，风量6档）档位处于前除霜状态/吹脚吹窗模式则不操作空调），播报“即将为您开启提神模式”，开始播放舒缓音乐1min；（若雨刮打开，则不开窗）
c：若90km/h<车速，打开空调冷风吹脸（温度1档，风量6档）档位（处于前除霜状态/吹脚吹窗模式则不操作空调），播报“即将为您开启提神模式”，开始播放音乐1min；
d：五菱小子做疲劳相应动作
|
|||
|
（7）智能行车辅助下疲劳提醒
|
触发条件：a&b&c&d&e
|
a：车速≥30km/h
b：智能行车辅助状态开启
c：识别到重度疲劳
d：不处于以下状态：倒车、全景、来电通话状态、语音状态、TTS状态、主驾抽烟状态，前排打电话状态
e：30min内疲劳未触发过
|
||
|
执行策略：a&b&(c|d|e)
|
a：打开空调冷风吹脸（温度1档，风量6档）档位
b：播报“识别到您疲劳，当前处于智能行车辅助模式，提醒您握紧方向盘，注意前方路况。即将打开提神模式”，开始播放舒缓音乐1min
c：若30km/h<车速≤60km/h，主驾车窗全开，（若雨刮打开，则不开窗）
d：若60km/h<车速≤90km/h，主驾车窗打开25% ，（若雨刮打开，则不开窗）
e：若90km/h<车速，车窗不打开
|
|||
|
（8）退出重度疲劳提醒
|
触发条件：a|b
|
a：已触发重度疲劳状态下，5min内未再次触发重度疲劳
b：语音输入：退出疲劳提醒/退出疲劳监测/关闭疲劳提醒/关闭疲劳监测（免唤醒）
|
||
|
执行策略：a&b&c
|
a：TTS播报“即将为您退出提神模式”
b：若车窗和空调未调节，则复原至开启前状态；若调节过则保持当前档位
c：暂停播放音乐
|
|||
三.分心提醒
视线区域区分如上图所示，分为14个区域，1区域为安全区域；2-9区域为警示区域；10-14为危险区域。
分心提醒场景描述
|
分心提醒
|
触发条件：(a|b|c)&d&e
|
a：30km/h≤车速＜60km/h，当视线在警示区域停留4S或危险区域停留3S时或在警示区域和危险区域停留总时间3S时
b：60km/h≤车速＜80km/h，当视线在警示区域停留3S或危险区域停留2S时或在警示区域和危险区域停留总时间2S时
c：车速≥80km/h，当视线在警示区域停留2S或危险区域停留1S时
d：30min内未触发过分心提醒
e：左/右转向灯未开启
|
||
|
执行策略：a
|
a：TTS播报“请注视车辆前方，不要分心哟”
|
|||
四.高速路口分心提醒
功能描述：
在导航高速出口时，会检测驾驶员注意力情况，若驾驶员没有看中控导航并且也没看右后视镜区域，并且驾驶员没有打转向灯、未进行明显的减速，则通过车机进行声音报警和动效报警，同时车机转向信息放大闪烁显示。
高速路口分心提醒场景描述
|
高速路口分心提醒
|
触发条件：a&b&c&d&e&f&g
|
a：处于导航状态
b：在距离高速出口一定的距离内，当提醒距离t<50m时；
c：车速大于60km/h；
d：视线累计看中控屏幕/左后视镜/右后视镜次数次≤3（距离高速路口1500m时开始计算到t<50m时间段内计数）
e：车速未降低20%
f：打转向灯
g：不处于以下状态：倒车、全景、来电通话状态、语音状态、TTS状态、主驾抽烟状态，前排打电话状态
|
||
|
执行策略：a&b
|
a：TTS播报“前方高速路口，请注意提前变道”
b：车机界面增大变道提示
|
|||
高速路口分心提醒场景描述（续）
|
高速路口分心提醒
|
提醒距离t计算公式
|
a、用户的反应时间 Y 的定义：
Y（反应时间，s）=x（tts播报占用时长，x0=3s）+y（驾驶员反映时间，y0=7s）+z（导航延迟时间，z0=7s）
b、反应距离的计算方式：
S（反应距离，m）=Y（反应时间，s）*v（车辆速度，m/s）
|
||
“高速路口分心提醒”车机提醒界面如上图。
五.接听电话提醒
功能描述：
检测到驾驶员手机接打电话，发起语音交互，提醒驾驶员不要打电话，专心开车。检测到驾驶员长时间打电话并结合挂电话时的情绪提醒驾驶员不要长时打电话，例如“happy ，你刚刚在跟谁煲电话粥，都不注意自己的安全了, 我有点小生气”。
接听电话场景描述
|
主驾接听电话提醒
|
触发条件：a&b&c&d
|
a：识别到驾驶员打电话
b：车速大于30km/h
c：30min内未触发过主驾打电话提醒
d：非蓝牙电话状态
|
||
|
执行策略：a
|
a：TTS播报“请专心开车，注意驾车安全”
|
|||
|
主驾情绪接听电话提醒
|
触发条件：a&b&c&d&e
|
a：驾驶员打电话时间超过10min
b：车速大于30km/h
c：30min内未触发过主驾情绪接听电话提醒
d：识别到驾驶员10min内情绪为happy次数n≥1；
e：非蓝牙电话状态
|
||
|
执行策略：a
|
a：TTS播报“你刚刚在跟谁煲电话粥，都不注意自己的安全了, 我有点小生气”
|
|||
|
副驾接听电话提醒
|
触发条件：a&b&c
|
a：识别到副驾驶员打电话
b：音乐播放中，且音量大于25%
c：非蓝牙电话状态
|
||
|
执行策略：a&b
|
a：音量降至15%-20%
b：车机弹窗显示“已为您降低音量”，保持5s后退出
|
|||
|
退出副驾接听电话提醒
|
触发条件：a
|
a：识别到副驾未拨打电话
|
||
|
执行策略：(a&c)|(b&c)
|
a：若音量未被调节，则音量恢复至原音量
b：若音量被调节，则音量维持为调节后的音量
c：弹窗显示“已退出副驾接听电话模式”
|
|||
“副驾接听电话提醒”弹窗显示如上图。
“退出副驾接听电话提醒”弹窗显示如上图。
六.抽烟检测
功能描述：
检测到驾驶员或副驾抽烟，如空调处于开启状态，则打开外循环，同时对应一侧车窗打开。
抽烟检测场景描述
|
进入抽烟模式
|
触发条件：a
|
a：识别到主驾/副驾抽烟
|
||
|
执行策略：(a|b)&c&(d|e|f)
|
a：若车速≤5km/h，TTS播报抽烟提醒“即将为您开启主驾/副驾抽烟模式”
b：若车速＞5km/h，TTS播报抽烟提醒“请注意安全驾驶，即将为您开启主驾/副驾抽烟模式”
c：打开空气净化，外循环、仅吹风、风量最大
d：若车速≤60km/h，对应侧（主驾/副驾）车窗全开，（若雨刮打开，则不开窗）
e：若60km/h<车速≤90km/h，对应侧（主驾/副驾）车窗打开25% ，（若雨刮打开，则不开窗）
f：若90km/h<车速，车窗不开启
|
|||
|
退出抽烟模式
|
触发条件：a
|
a：识别到主驾/副驾结束抽烟
|
||
|
执行策略：a&b
|
a：TTS播报“即将为您关闭抽烟模式~”
b：调节车窗和空调至原位置（若车窗和空调在抽烟模式下用户未调节过）
|
|||
注意：在“退出抽烟模式”状态下，若主驾和副驾均在抽烟，则任一侧结束抽烟，仅恢复其车窗与空调状态；待主副驾均结束抽烟后再播报TTS。
七.人脸识别
功能描述：
识别预先录入的人脸ID，实现车辆账户登录。
人脸录入方式：
车机端注册时截取一段小视频，视频时长1S，25fps左右即可。
人脸录入流程：
-
用户在个人中心——账号登录中，已登录账号下方可看到“Face ID未录入”字样。点击“Face ID未录入”，车机端提示录入人脸步骤；
-
点击提示下方“立即录入”字样，地平线 Service APP 开始进行人脸检测和注册；按照检测到的人脸姿态及遮挡情况，对用户进行对应的提示，协助用户调整面部姿态并正视前方，从而完成注册；
-
地平线Service APP把注册结果返回给个人中心，车机侧提示“人脸注册完成”，用户“确认”后完成人脸注册的全部流程。
人脸识别场景描述
|
人脸识别
|
触发条件:a
|
a：车机启动用户上车后，识别主驾人脸ID
|
||
|
执行策略:a
|
a：使用人脸识别结果完成账户登录
b：弹窗已登录
|
|||
人脸识别注册界面如上图。
人脸识别登录界面如上图。
八.车内拍照
功能描述：
用户可以通过说“我要拍照”或点击拍照应用的方式，进入拍照应用，利用车内摄像头进行拍照；拍摄的照片可保存在本地查看，同时可上传至云端个人相册，手机端可预览、下载并分享至微信朋友圈等社交媒体，彰显个性。在车内拍照功能中（人物自拍），视觉模块可结合头部位置定位、人脸识别到用户的年龄、性别情绪等，在拍照界面显示标签（如，祖国的花朵、小公主、小王子、小哥哥、小姐姐、高富帅、白富美、萌妹子等）。当识别到用户所拍摄的照片有闭眼的情况，视觉模块应进行提示播报，提示用户重新拍摄。
拍照限制存储100张照片，单张照片1M。
车机端上传人脸等具有用户隐私的图片至云端。
车内拍照场景描述
|
车内拍照
|
触发条件:a|b
|
a：语音输入“我要拍照”（全局免唤醒）
b：车机屏幕进入拍照页面，点击我要拍照
|
||
|
执行策略:a
|
a：打开车内摄像头，并在中控屏显示；屏幕显示拍照倒计时“3 2 1”，计时结束即拍照。
|
|||
|
面部识别显示
|
触发条件:a&b
|
a：拍照模块已启动
b：结合头部位置定位、人脸识别到用户的年龄、标签等
|
||
|
执行策略:a
|
a：拍照界面显示识别出的人脸，标识年龄（显示年龄段）、标签，年龄与标签的对应关系
|
|||
车内拍照界面如上图。
年龄与标签对应关系表
|
年龄段
|
人脸识别信息显示（男）
|
人脸识别信息显示（女）
|
|
0＜年龄＜12
|
年龄+“小王子”
|
年龄+“小公主”
|
|
12≤年龄＜24
|
年龄+“小鲜肉”
|
年龄+“小仙女”
|
|
24≤年龄＜30
|
年龄+“小哥哥”
|
年龄+“小姐姐”
|
|
30≤年龄
|
年龄+“高富帅”
|
年龄+“白富美”
|
九.手势识别
功能描述：
识别用户特定手势，执行车辆控制或者其它动作。
手势识别场景描述
|
手势识别
|
①
|
触发条件：a
|
a：识别到比耶手势
|
||
|
执行策略：a
|
a：触发车内拍照功能（当前在任意界面均触发）
|
||||
|
②
|
触发条件：a
|
a:识别到左右挥动手势&当前正在播放媒体资源
|
|||
|
执行策略：a
|
a：切换上一个/下一个（当前在任意界面均触发）
|
||||
|
③
|
触发条件：a
|
a：识别到上下滑动手势&当前空调处于开启状态
|
|||
|
执行策略：a
|
a：风量增加一档/风量减少一档（当前在任意界面均触发）
|
||||
|
④
|
触发条件：a
|
a：识别到比心手势&当前正在播放媒体资源
|
|||
|
执行策略：a
|
a：收藏/取消收藏当前播放的音乐/电台
|
||||
|
⑤
|
触发条件：a
|
a：识别到点赞手势
|
|||
|
执行策略：a
|
a：导航前往公司（备注：若未设置公司地址，如何反馈——跳转到导航界面，输入公司地址然后导航前往公司）
|
||||
手势识别场景描述（续）
|
手势识别
|
⑥
|
触发条件：a
|
a：识别到“OK”手势
|
||
|
执行策略：a
|
a：导航回家（备注：若未设置家庭地址，如何反馈——跳转到导航界面，输入家庭地址然后导航回家）
|
||||
|
⑦
|
触发条件：a
|
a：识别到顺/逆时针转圈手势
|
|||
|
执行策略：a
|
a：音量增加/音量减小
|
||||
十.手势识别引导
功能描述：
方向盘控制按键或中控台处点击到与手势识别执行策略（音量调节，空调风量调节等）相关的操作后，屏幕弹窗显示手势识别的引导图标(持续5s)。
PS：当日单一手势识别引导出现达到3次则不再弹出此手势的引导，关闭手势识别引导开关后再打开，次数重置（隔日也同样次数刷新）；弹窗可勾选“不再提醒”关闭手势识别引导开关。
手势识别引导场景描述
|
手势识别引导
|
①
|
触发条件：a
|
a：用户使用方向盘控制按键切歌
|
||
|
执行策略：a
|
a：弹窗显示相关手势图标及“左/右挥动手掌，可切换上一曲/下一曲”
|
||||
|
②
|
触发条件：a
|
a：用户使用方向盘控制按键调节音量
|
|||
|
执行策略：a
|
a：弹窗显示相关手势图标及“顺/逆时针转动手指，可调节音量增加/减小”
|
||||
|
③
|
触发条件：a
|
a：用户调节空调风量
|
|||
|
执行策略：a
|
a：弹窗显示相关手势图标及“上/下挥动手掌，可调节空调风量增大/减小”
|
||||
|
④
|
触发条件：a
|
a：用户打开相机APP
|
|||
|
执行策略：a
|
a：弹窗显示相关手势图标及“比耶可打开相机拍照”
|
||||
|
⑤
|
触发条件：a
|
a：用户收藏电台/音乐成功后
|
|||
|
执行策略：a
|
a：弹窗显示相关手势图标及“比心可收藏喜欢的电台/音乐”
|
||||
|
⑥
|
触发条件：a
|
a：用户成功设置并开始一次导航之后
|
|||
|
执行策略：a
|
a：弹窗显示相关手势图标及“比个“赞”可导航到公司；比个“OK”可导航到家”
|
||||
手势识别引导界面如上图。
十一.儿童模式
功能描述：
能够识别儿童年龄，上车时车机主动和儿童互动。
儿童上车问候场景描述
|
儿童上车问候
|
触发条件:a&b
|
a：车辆由休眠转到ready状态
b：识别到0-12岁儿童（两分钟内）
|
||
|
执行策略:a
|
a：TTS播报儿童上车问候
|
|||
|
儿童年龄段
|
播放内容
|
备注
|
||
|
0-12
|
你好呀，可爱的小宝贝，欢迎来到五菱车载智慧世界
|
可使用儿童照片进行测试
|
||
十二.视线交互
功能描述：
通过视线角度控制车辆
视线交互场景描述
|
视线控制
|
触发条件:a&b&c
|
a：车速<20km/h
b：识别视线方向为空调出风口/左右车窗
c：语音输入“打开/关闭”
|
||
|
执行策略:a&b
|
a：打开对应车内设备
b：TTS播报“已为您开启空调/车窗”
|
|||
|
视线亮屏（1）
|
触发条件:a&b
|
a：屏幕显示为夜间模式
b：识别视线方向由非中控屏移到中控屏方向
|
||
|
执行策略:a∣b
|
a：如果亮度低于80%,则调整到80%；
b：如果亮度大于80%,则不调整亮度
|
|||
|
视线亮屏（2）
|
触发条件:a&b
|
a：屏幕为熄屏状态
b：识别视线方向由非中控屏移到中控屏方向
|
||
|
执行策略:a
|
a：点亮屏幕
|
|||
|
退出视线亮屏
|
触发条件:a&b
|
a：已触发了视线亮屏（1）
b：识别视线方向由中控屏移到非中控屏方向
|
||
|
执行策略:a
|
a：屏幕亮度调节至视线亮屏前亮度（夜间模式固定的亮度）
|
|||
十三.无麦K歌
功能描述：
无麦K歌即用户可通过内置麦克风及扬声器，体验KTV唱歌。进入K歌播放页后，可进行录音文件创建，开始录音。
录音界面显示如上图。
麦克风切换逻辑
K歌过程中暂不支持麦克风拔插的无缝切换，具体切换逻辑如下：
(1)内置麦克风->USB麦克风：弹窗提示“已切换至USB麦克风，为保证评分功能及录制效果，重新演唱后生效”，点击“重唱”则重新开始演唱，其他区域无法点击；
(2)USB麦克风->内置麦克风（带J3的车机演唱中途拔出）：弹窗提示“已切换至内置麦克风，为保证评分功能及录制效果，重新演唱后生效”，点击“重唱”则重新开始演唱，其他区域无法点击；
十四.交互设计
设置页面开关
|
开关名称
|
开关状态
|
功能介绍
|
|
视觉识别（总开关）
|
默认开启
|
视觉功能，为驾乘人员提供智能主动的提醒
|
|
疲劳监测开关
|
默认开启
|
高速行驶时，识别到驾驶员疲劳将主动提醒
|
|
分心提醒开关
|
默认开启
|
行驶过程中识别到分心将提醒驾驶员
|
|
打电话提醒开关
|
默认开启
|
识别到拿起手机接听电话将主动提醒
|
|
抽烟检测开关
|
默认开启
|
识别抽烟动作后能主动净化车内空气
|
|
上车问候开关
|
默认开启
|
识别驾驶员特征，进行个性化问候
|
|
FaceID开关
|
默认开启
|
录入人脸信息后，可自动识别并登录
|
|
手势识别开关
|
默认开启
|
使用手势动作可直接控制车辆
|
|
手势识别引导开关
|
默认开启
|
引导用户学习并使用手势识别功能
|
|
拍照年龄、性别显示开关
|
默认开启
|
此开关设置在相机应用中
|
|
儿童模式开关
|
默认开启
|
识别到儿童将主动播放儿童喜爱的内容
|
|
视线控制开关
|
默认开启
|
视线注视空调出风口可控制开关
|
触发优先级别
1、优先级别定义
视线控制＞分心提醒＞疲劳提醒＞打电话＞抽烟提醒=儿童模式=手势识别引导；
同一事件中，主驾动作＞副驾动作；当主驾操作与副驾操作相冲突时，原则上以主驾事件触发优先，具体以功能场景中定义为准。
2、场景优先级策略说明
①如果优先级高的场景先触发，则优先级低的场景车控不会执行并更新到挂起列表中；
②如果优先级低的场景先触发，则优先级低的场景车控会被覆盖并更新到挂起列表中；
③如果优先级高的场景先结束，则从挂起列表中获取优先级高的的场景车控；如果挂起列表为空，则车控恢复到最原始的状态；
④如果优先级低的场景先结束，则车控状态不改变，并从挂起列表中删除；
⑤如果两个场景同时执行tts,则优先级低的场景会被优先级高的场景打断并强制结束场景；
⑥如果用户手动修改了车控，则车控不会再恢复。