基于多模态特征组合的真实驾驶疲劳状态识别.pdf
《基于多模态特征组合的真实驾驶疲劳状态识别.pdf》由会员分享,可在线阅读,更多相关《基于多模态特征组合的真实驾驶疲劳状态识别.pdf(9页珍藏版)》请在咨信网上搜索。
1、2023年10 月Chinese Journal of Biomedical EngineeringOctober2023中42卷5期医国No.5生Vol.42报程物学学基于多模态特征组合的真实驾驶疲劳状态识别王琳*王宏付荣荣3尹晓伟!刘劲涛1(沈阳工程学院机械学院,沈阳110136)2(东北大学机械工程与自动化学院,沈阳110819)3(燕山大学测控技术与仪器河北省重点实验室,河北秦皇岛066004)摘要:对驾驶员在驾驶过程中的疲劳状态进行实时准确的预判,可减少由于驾驶疲劳引发的交通事故。首先,通过无线体域网采集了12 名驾驶员在真实驾驶过程中的多模态特征,提取了脑电、肌电、呼吸等3种生理信
2、号的特征参数近似熵,其中基于畸变能密度理论(DED)确定肌电信号的采集位置为颈6 棘突旁开2 cm处的上斜方肌;然后,通过模糊C聚类方法分析了3种特征参数组合对疲劳状态的反映效果;最后,建立基于马氏距离理论的真实驾驶疲劳判别模型。研究结果表明,驾驶员颈6 部位比颈7 部位肌电信号的ApEn值显著下降(P0.05),表明颈6处肌肉比颈7 处肌肉对驾驶员的疲劳状态反映更为敏感,实际检测结果与畸变能密度理论计算结果一致,证明了该位置提取肌电信号的正确性和准确性;脑、肌、呼吸这3种生理信号的ApEn值均随驾驶时间的延长呈递减变化,驾驶约90 min时递减趋势变缓,表明驾驶员进入疲劳状态;通过模糊C聚类
3、分析可知,当脑电与肌电ApEn组合时,清醒与疲劳的概率分布界限清晰,可有效反映驾驶疲劳状态;以脑电和肌电近似为自变量,基于马氏距离理论建立真实驾驶过程的疲劳判别模型,其测试集准确率达90.92%,表明该模型能够比较准确的判别出驾驶员的疲劳状态。关键词:驾驶疲劳判别模型;脑电信号;肌电信号;呼吸信号;近似中图分类号:R318文献标志码:A文章编号:0 2 58-8 0 2 1(2 0 2 3)0 5-0 554-0 9Investigation on Actual Driver Fatigue Based on Combination of Multi-CharacteristicsWang L
4、in*Wang HongFu RongrongYinXiaoweil23Liu Jintao(Department of Mechanical Engineering,Shenyang Institute of Engineering,Shenyang 110136,China)2(School of Mechanical Engineering and Automation,Northeastern University,Shenyang 110819,China)(Measurement Technology and Instruction Key Lab of Hebei Provinc
5、e,Yanshan University,Qinhuangdao 066004,Hebei,China)Abstract:In order to discriminate driver fatigue accurately in real-time and reduce the traffic accidents causedby driver fatigue,physiological signals of 12 subjects in actual driving were recorded by wireless body areanetwork(W BA N),a n d a p p
6、r o x i ma t e e n t r o p y(A p En)o f e l e c t r o e n c e p h a l o g r a p h(EEG),e l e c t r o my o g r a p h y(EMG)and respiration(RESP)signals were extracted.The upper trapeziuses at 2 cm of both sides of 6thspinous process were determined as the data acquisition positions of EMG based on di
7、stortion energy density(DED)theory.Then the discriminant degree of their combination was analyzed by the fuzzy C-clusteringmethod.Finally,a discriminant model on driver fatigue was built based on Mahalanobis distance theory.Theexperimental results showed that the decreasing trend of the upper trapez
8、ius at 6 spinous process was moreobvious than that at 7 spinous process,and the significant index P0.05,indicating the muscles at 6 spinousprocess were more sensitive for driver fatigue.The actual testing result was consistent with the calculation resultof DED theory,and verified the correctness of
9、acquisition position of EMG.During the actual driving,theApEns of EEG,EMG and RESP signals decreased.After about 90 min,the decreasing trend slowed down,doi:10.3969/j.issn.0258-8021.2023.05.005doi:10.3969/j.issn.0258-8021.2023.05.005收稿日期:2 0 2 1-10-18,录用日期:2 0 2 2-11-2 8基金项目:国家自然科学基金(6 2 0 0 1312,6
10、2 0 7 32 8 2);辽宁省科学技术计划项目(2 0 2 1-MS-269)*通信作者(Correspondingauthor),E-ma i l:w a n g l i n s i e.e d u.c n5555期琳,等:基于多模态特征组合的真实驾驶疲劳状态识别indicating the deeper fatigue.By the fuzzy C-clustering analysis,in the case of the combination of EEC-EMG,obvious discrimination of the probability distribution bet
11、ween normal and fatigued state were detected,and theywere selected as independent variables.Finally,a discriminant model on driver fatigue based on Mahalanobisdistance theory was built,and its accuracy was up to 90.92%,which effectively discriminated the driverfatigue.Key words:discriminant model on
12、 driver fatigue;electroencephalograph(EEG);electromyography(EMG);respiration(RESP)s i g n a l s;a p p r o x i ma t e e n t r o p y(A p En)引言驾驶疲劳问题已引起全球各国研究人员的关注1-2 ,针对驾驶疲劳进行检测和判别具有重要的现实意义。大量研究表明,通过生理特征来判别驾驶员的疲劳状态,可靠性和准确性较高,因为生理特征不受驾驶人的主观意识而变化,是驾驶过程中最为客观的数据信息3-18 生理特征测试法即是通过测量人体的生理信号来判别其疲劳程度,选用不同的测量方
13、法3-41、不同的生理信号5-6 、不同的特征参数7-9,都可以判别驾驶人的疲劳状态。Zhang等10 1认为脑电信号是反映驾驶员疲劳的有效生理特征,其通过一种新式的脑电信号收集方法建立了基于脑电信号特征参数的驾驶疲劳判别模型。肌肉疲劳也是疲劳状态的一个显著特征1,是驾驶员最易产生感性认识的生理特征。对此,Hostens等12 评估了驾驶过程中驾驶员的肌肉状态,并通过肌电信号来识别疲劳状态。Zou等13 和Luo等14 建立了基于多模态焰和经验模态分解的驾驶疲劳判别方法,认为近似熵可有效表征驾驶员的疲劳状态以上研究均为驾驶疲劳的判别提供了十分重要的指导。但是,合理标定肌电信号的疲劳易感位、基于
14、多模态特征的组合分析、将实验范式用于真实驾驶过程等,在已公开发表的论文中涉及较少。本研究以前期研究为基础,将可穿戴传感器及无线体域网的在线检测方法191应用于真实驾驶过程,基于生物力学畸变能密度理论(distortion energydensity,D ED)合理标定驾驶员颈部肌肉的疲劳易感位,提取真实驾驶过程中驾驶员的多模态特征,并利用模糊C聚类算法确定能够反映驾驶疲劳状态的最优特征组合,以此来建立以马氏距离理论为判别准则的真实驾驶疲劳判别模型,最后采用十折交叉验证的方法检验模型的有效性,并分析该模型判别准确率高的原因。1材料和方法1.1驾驶实验设计本实验得到秦皇岛第一医院伦理委员会的批准。
15、选取12 名年龄在2 2 35岁之间的志愿者作为被试者,被试者在参加实验前均签署了知情同意书。所有被试者身高为158 18 0 cm,体重为5585kg,无肌肉骨骼系统疾病史,且均有两年以上驾龄。实验前,被试者2 4h内不允许饮用酒精、咖啡等刺激性饮料。实验过程中,要求12 名被试者驾驶汽车在丹阜高速公路沈阳至丹东段连续驾驶12 0min,控制车速10 0 km/h以内,对驾驶员的多模态特征进行实时监测(见图1),包括脑电信号、肌电信号、呼吸信号等。生理信号由便携式可穿戴设备-生物反馈仪(Biofeedback2000)进行记录,其为戴在被试者身上的3个传感器模块,处理器为2 4bit,采样频
16、率2 0 0 Hz。通过无线体域网来实现数据接收,采集到的数据直接发送到处理系统。同时,驾驶过程中辅助人员协助驾驶员每10 min填写SOFI-25(Sw e d i s h O c c u p a t i o n a l Fa t i g u e In v e n t o r y-2 5)主观调查表,该表能够反映驾驶员的以下5种感觉:精力不足、体力耗尽、身体不舒适、缺乏动力、困倦等,0 分表示无这5种感觉,10 分表示感觉强烈。该表是被试者根据自身感觉对当前疲劳程度的主观判断,以此来辅助确定驾驶员是否达到疲劳状态图1真实驾驶实验设计Fig.1Experimental design of ac
17、tual driving42卷556中报程生学医学国物真实驾驶实验过程及数据处理流程如下:1)采集12 名驾驶员连续驾驶12 0 min的脑电、肌电、呼吸信号;2)采用经验模态分解EMD预处理方法去除肌电信号产生的基线噪声2 0 ,再对各驾驶员每10 min截取30 s数据计算其特征近似熵(若该30 s内有猛踩油门、刹车、急转弯等操作造成的信号突变,则将提取数据的时间点前移至该突变前的30 s);3)根据模糊C聚类分析,选取能够有效表征驾驶疲劳的特征参数组合;4)构建基于马氏距离理论的驾驶疲劳判别模型,数据采集过程如下:清醒状态选取10 15min,疲劳状态选取10 0 10 5min,每30
18、 s提取一组特征参数,则共有“两种状态(5min/0.5min)12 名被试者=2 40 组特征参数”,其中清醒状态和疲劳状态数据各为12 0 组。1.2基于畸变能密度理论确定肌电信号采集位置驾驶过程中驾驶员颈肌疲劳易发生在颈部低节段的颈6 和颈7 部位,首先对颈6 和颈7 节段肌肉进行受力分析,再基于畸变能密度理论建立颈部生物力学模型,分析颈部肌肉的受力情况,以此来为合理确定颈部肌电信号的采集位置提供理论依据。依托生物力学理论,根据驾驶员的实际驾驶姿势,按照人体头颈部构造及受力情况,将其简化为图2 所示的变截面悬臂梁。图中,G为颈部外载(主要为头部重量),X为颈部阻力臂,L为颈部均部载荷长度
19、,q为载荷系数,0 为屈颈角度。式(1)为复杂应力状态下畸变能密度方程。根据图2 给出的驾驶姿态受力分析可知,颈部受力符合单向拉伸屈服,则由式(1)可推导出式(2)所示的驾驶员颈部生物力学模型,据此可计算得到颈部任意垂直于颈部棘突的截面肌肉的正应力。由颈部构造可知,DA额。DA预7,DB额6 0),对每一个矢量X(i)值,统计距离小于的数目,并计算该数目与总距离N-m的比值,记为Ci(m)(r),即1Cim)(dX(i),X(j)r 的数目N-m(5)步骤4:将Ci(m)(r)取对数,再求所有i的平均值,即1N-m+1d(m)InC(m)(r)(6)N-m+1步骤5:将矢量增加为m+1维,重复
20、步骤1 步骤4,得到Ci(m+1)(r)及(m+1)(r)。步骤6:计算近似熵值:ApEn(N,m,r)=(m)(r)-(m+1)(r)(7)1.4.2模糊C聚类采用模糊C聚类将多模态生理信息ApEn组合进行分析,即通过计算样本对类别的隶属度来达到自动对样本进行分类的目的。其优化目标函数为2 6 NCJ=(8)算法如下:步骤1:初始化;(9)步骤2:利用Uck计算矢量中心点C(h)=c(第步),式中,N=1(10)=步骤3:更新Uc)和Uk+11(11)Ck=1步骤4:若U(k+1)-U(k),则停止;否则回到步骤2。1.4.3马氏距离算法根据马氏距离(Mahalanobisdistance)
21、理论来建立驾驶疲劳判别模型,其能考虑到数个特征与样本集之间的关系。即根据式(12)分别计算特征样本x至总体Q和Q,的马氏距离D,(x,Q,)和D,(x,Q)。若D,0,xEQ(18)H(x)0,xEQ1.5统计学分析为了考察不同特征参数在表征清醒与疲劳两种状态时的差异性,对提取的生理信号的特征参数ApEn进行了配对t检测,检测方法是采用SPSS统计分析软件对数据样本进行统计学分析。当计算得到的显著性P0.05时,表明其在表征清醒与疲劳状态时差异不明显2 8 2结果2.1特征参数近似熵的提取结果所采集的12 名驾驶员在丹阜高速公路连续驾驶12 0 min的脑电、肌电、呼吸信号近似熵ApEn平均值
22、变化趋势如图5所示。由图可见,3种信号的ApEn均随时间的增加呈递减型变化,表明被试者疲劳程度呈上升趋势。约8 0 90 min后ApEn值下降程度减缓,表明驾驶员进人疲劳状态。虽然驾驶情况具有差异性,反映驾驶疲劳的各特征参数略有波动,但整体递减型变化趋势保持一致,具有规律性。其中,脑电及肌电信号近似摘在各时间节点处的标准差较小,说明其近似嫡对识别驾驶员疲劳有较高的区分度及稳定性。基于以上真实驾驶的检测结果,根据图5的多模态信息数据、驾驶员主观调查结果、文献调研2 9 相结合的方式定义:驾驶初期的0 30 min为清醒状态,90 12 0 min为疲劳状态。2.2基于模糊C聚类的特征参数组合分
23、析利用模糊C聚类对多模态特征近似熵组合实1.71.61.51.41.31.2肌电信号0.4脑电信号一呼吸信号0.30.20.1020406080100120驾驶时间/min图5所有被试者生理信号ApEn的近似熵均值Fig.5Averaged value of ApEns of physiological signalsofall subjects施分析,其目的是淘汰对驾驶疲劳反映不灵敏的特征参数,从而获取能够有效反映疲劳状态的最优特征组合。脑电-肌电、脑电-呼吸、肌电-呼吸近似熵的聚类分析结果分别如图6-8 所示,图中给出的是清醒状态的概率分布。由图6 可见,当脑电、肌电ApEn值都较大时,清
24、醒状态的概率较大(达8 0%以上);当脑电、肌电ApEn都较小时,清醒状态的概率较小(不足2 0%),即疲劳状态的概率大。图中所示的脑电-肌电组合,清醒与疲劳的概率分布界限明显,即一个脑电ApEn与一个肌电ApEn可反映驾驶员的一个状态(清醒或疲劳),这是此种组合的优势所在,可有效识别驾驶员的状态。但是,脑电、呼吸特征组合时(见图7),在脑电ApEn的坐标轴上具有一定的界限,而在呼吸ApEn的坐标轴上没有清晰的界限,在划分上存在两种状0.91.00.80.80.70.6元0.60.40.50.2、0.40.31.00.80.20.61.00.40.80.10.60.20.4ApenEEG000
25、.2ApenEMG图6脑电信号与肌电信号特征近似焰聚类结果Fig.6Clustering results of ApEns of EEG and EMG5595期琳,等:基于多模态特的真实驾驶疲劳状态识别Z1.00.90.80.80.70.60.60.40.50.40.20.31.00.20.51.00.10.60.80.4ApenEEG000.2ApenRESP图7脑电信号与呼吸信号特征近似聚类结果Fig.7Clustering results of ApEns of EEG and RESP0.91.00.80.80.70.60.60.40.50.20.400.31.00.80.20.61
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 基于 多模态 特征 组合 真实 驾驶 疲劳 状态 识别
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。