基于计算机视觉的人体坐姿检测设计.pdf

10|电子制作2023 年 7 月电子技术基于计算机视觉的人体坐姿检测设计任博1，2，金红1（1.桂林理工大学信息科学与工程学院，广西桂林，541004；2.深圳星宸科技股份有限公司深圳分公司，广东深圳，518000）摘要：“久坐族”越来越多的当下，人们更需要去注意到不良坐姿带来的问题。当久坐在办公桌前、课桌前或者是工位前，有些时候人们知道当前的坐姿是不标准的或者已经发生了久坐，但是如果个人没有强大的意志和科学的提示就会导致自己的身体得不到及时的调整而发生颈椎和腰椎的损伤。设计将以v831SOC作为硬件平台，以linux cpython为软件平台来完成。主要完成任务为以人脸不同像素点和人脸面积为依据完成对坐姿的判断。关键词：人体坐姿；久坐；计算机视觉；人脸；语音提示0 引言在高速发展的今天，大量的机械化和可视化脑力劳动代替了简单的体力活动。这也导致了办公室办公成为当下的主流。但是，随之发生的是久坐和长期的不良坐姿产生的脊椎病的产生，这无疑给人们敲响了警钟。此外，如果无法避免去久坐不如去及时地检测坐姿和给予自己一些提示来预防疾病，大多情况是，人们已经意识到了自己的坐姿不正确，或者久坐了。但是没有外部压力的驱使，大多数人就选择妥协和放任不管。所以目的不只是单单的提示也是让越来越多的人意识到不良坐姿和久坐的危害性。因此本设计就是为了减少不良姿势的久坐对人体的伤害和久坐提醒。1 系统结构及硬件设计本系统主要基于 V831SOC 处理器主板和 SP2305 摄像头，以 OpenCV 为平台设计视觉处理的任务，通过摄像头进行人的脸部的位置、鼻子位置、嘴巴位置，前额角度等进行坐姿判断和矫正人体坐姿，如果坐姿不正会发出警报和语音提示，系统结构图如图 1 所示。图 1系统结构设图系统硬件主要以主处理器V831SOC、SP2305摄像模块、SPI 显示屏、蜂鸣器电路，语音模块电路，旋钮电位器电路，电源电路等构成。V831 通过 ADC 接受旋钮电位器的数据来设定参数，通过 SP2305 拍摄像头检测，V831SOC 处理器数据处理判断识别坐姿、控制语音播放和蜂鸣器提醒，总体电路连接框图如图 2 所示。V831SOC处理器SP2305摄像模块SPI显示屏语音模块旋钮电位器蜂鸣器电路电源电路图 2总体电路连接框图2 程序与算法设计 2.1 程序设计在 V831SOC 处理器主板上安装 Linux 系统，设备树中加入SP2305摄像头、SPI显屏幕、蜂鸣器、定时器的驱动，主程序流程图如图 3 所示，先找人脸的位置再定位眼睛、鼻子和嘴巴的位置，通过它们的相对像素偏移求得人体是否为弯腰，通过整个人脸的像素区等比例的放大或者缩小判断是否为身体前倾进而判断出当前的坐姿角度，使用旋转电位器输入标准的坐姿角度范围和久坐时间，通过按键转换模式，实时检测过程中如果检测到的坐姿角度超出设定范围或者定时器达到的设定的久坐时间，通过蜂鸣器和语音进行提示。2.2 算法设计在坐姿检测如图 4 所示，主要是对人脸特征点的运算和整个人脸面积的像素点变化作为主要依据，通过观察测量数据的变化和实际测试的效果确定各个部位的权重比。首先需要先定义需要计算的数据量如表 1 所示。wwwele169com|11电子技术表1数据量定义表眼睛位置Eyes11,X Y鼻子位置Nose22,X Y嘴巴位置Mouth33,X Y整个人脸面积S_FaceS注：均以像素点为单位（PixPixelPoint）表2基准表眼睛标准位置Eyes_Base11_,_Xb Yb鼻子标准位置Nose_Base22_,_Xb Yb嘴巴标准位置Mouth_Base33_,_Xb Yb整个人脸标准面积S_Face_BaseS_base坐姿起源于对人脸的检测，在整个系统的开始阶段会先进行一个标准坐姿的标定过程，以完成对后续算法的运行。设采集到的基准数据如表 2 所示。在实际情况中，因为有测量误差和动态的识别错误所以在合理的判断范围中加入一定的误差阈值，整个阈值减少一些复杂情况下的误判失误，设误差阈值如表 3 所示。表3误差阈值表眼睛误差阈值w_eye鼻子误差阈值w_nose嘴巴误差阈值w_mouth整个人脸面积误差阈值w_s需要根据测试数据确定数据融合的算法，在实际坐立过程中我们侧重是对弯腰和低头的测量，那么就需要选择对低头灵敏度最高的数据，所以在选择数据时候更多的符合运动变化一致的数据轴数据，但是目标不会一味的俯仰头，因此图 4坐姿检测算图图 3主程序流程图12|电子制作2023 年 7 月电子技术也需要降低其他动作对于测量的判断，减少误判，俯仰过程变化如图 5 所示。综合上面的基本动作的数据变化图，就可以分析出不论是什么动作，嘴巴和鼻子数据的变化率均大于眼睛的数据变化，且在俯仰头过程中数据的变化率明显大于其他动作，所以可以达到设计预想的目标。但是仍需简化数据和提高灵敏度：设融合变化值为 P：（因为摄像头画面为固定大小所以不需要进行归一化处理），处理方式如式 1 所示。1230.20.40.4bbbpx xx xx x=+式(1)可以看到数据融合后不仅方便代码的判断也提高了对上下俯仰头的灵敏度。但是目前还未加入误差阈值在其中所以最终的判断值 P，如式 2 所示。1230.20.40.4eyebnosebmouthbpwx xwx xwx x=+式(2)为了更加优化算法的正确率，需要引入人脸面积的数据来防止人脸贴近摄像头和直立上下时发生的误判。图 7 验证了在弯腰时候数据的变化会更明显些，因此把融合数据和人脸面积变化一起作为判断条件，如图 8 所示。3 坐姿模型分析在确定了坐姿算法的条件下，对于坐姿的物理模型就更加容易判断和分析。根据人体骨骼的运动方式，可以将坐姿中弯角分为以下两个部分，以颈椎处设为节点。一种情况是颈椎以上的头部发生弯曲所产生的不良坐姿，图 9 为躯干分解示意图。设当前的躯干弯曲角度为 90，头部弯曲角度为90。因为在弯腰的时候，躯干并不会发生太大的变化，经过实际情况的测量，躯干弯曲角度大都不超过 10。头部的弯曲角度由上述的坐姿检测算法求得。躯干的弯曲角度则有图像中的肩部像素点确定，图 10 是人体坐姿判断点图。肩部的像素点位置需要靠人体肤色与背景色的差异产生二值化的阈值图，再根据头部数据和人体骨骼分布比例计算出躯干的位置，具体方法是通过头部宽度计算出肩膀的宽度，再通过扫描二值化图像，发现出连续像素点大概等于宽度的区域就是肩部位置。现设上半身高度为 H，身体前倾角度为，则人体图 7人脸面积变化图 9躯干分解图图 6 融合后动态图图 5俯仰过程变化图 8坐姿判断方式wwwele169com|13电子技术肩部 X 轴方向前倾距离为 X。sinXH=式(3)人体肩部 Y 轴向下距离为 Z。cosZHH=式(4)再根据公示 1 中的距离推算公式，求得摄像头画面像素点的变化进而得出坐姿倾角。4 测试结果系统利用人物对象对整体功能的运行状况和坐姿识别的效率和精度进行测试。整体运行是对各个元器件的驱动情况测试，分别由摄像头、显示屏、蜂鸣器、旋钮开关和语音模块组成。观察同时运行时是否发生冲突和时序的运行稳定。4.1 运行时间测试启动的整个流程为 Linux 启动-自动运行代码-摄像头初始化-ADC 初始化-显示屏初始化-人脸识别模型加载。因为设计完成功能对系统启动时间也有一定的要求，表 4是每一个流程启动所需要的时间表（根据 Linux 系统时间所得）。表4运行时间测试表所测项目所测时间Linux系统启动4s摄像头初始化80msADC初始化3ms显示屏初始化10ms人脸识别模型加载800ms算法运行周期100ms机器开机进入功能运行的时间大概为五秒，符合实际需求。4.2 对比测试目前国内外的坐姿检测的技术在摄像头方面大概分为依靠头部和骨骼分析两大类型，本设计是依据于头部判断的算法升级。相较于骨骼运动判断来说，本设计在测量精度上无法达到，但是因为本设计所用的模型是人脸模型，算法和模型都较为成熟，模型的占用内存更小，启动时间也更快，可以适用于运算条件有限的系统。相较于头部算法判断的精度减少了很多情况的误判。4.3 坐姿识别测试因为在摄像头的摆放位置不同，人体距离摄像头的距离不同，人体的身高不同，摄像头的对立角度不同，这些对于系统的都会产生影响所以也是本设计的一个缺陷。但是根据测试发现，当摄像头垂直于桌面摆放且以 45的倾角拍摄人脸效果最佳因为大部分驼背的角度为 15左右，根据人体平均身高当人脸距离桌面 0.5m，摄像头距离桌面 0.5m 距离时即可满足要求如图 11 所示。图 11位置摆放图测试对象为本人，坐姿判断条件设定为 15（人体倾角为手机陀螺仪测量），久坐时间设定为 1min，测试数据如表 5 所示。表5角度测试表人体倾角0481216融合判断值085137211338人脸面积值3245385344398534786945是否触发提示否否否否是语音提醒未提示未提示未提示未提示提示蜂鸣器提醒未提醒未提醒未提醒未提醒提醒人体倾角1820253040融合判断值4174912570664701人脸面积值74328238390034950236034是否触发提示是是是是否语音提醒提示提示提示提示未提示蜂鸣器提醒提醒提醒提醒提醒未提醒5 结论因为主处理板已经可以完成主要的功能，但是为了集成性和实物的可测量性依然要对系统进行电路的焊接，在整个焊接过程中需要小心，尤其是在供电的部分如果发生短路或者是接反，会发生烧毁整个系统的结果。每个元器件的摆法也需要注意，旋钮开关需要符合人体工学。软件方面可以把写好的程序放在启动文件中自动执行可以提高整个系统的快速启动能力，关闭其板载的不要用功能，节省 CPU 资源。图 10人体坐姿判断点图（下转第 40 页）40|电子制作2023 年 7 月实验研究模型的搭建，并针对参数母线电压和交流电压的不同工况进行了仿真，仿真结果表明，DPWMA 调制方式下的功率器件的开关损耗明显小于 SVPWM 调制方式，仿真得到的损耗数据与计算后的结果几乎一致，该仿真模型为工程师散热设计提供了基本的数据。参考文献 1 卞蓓蕾,宋振浩,吕志鹏等.一种新型拓扑的三电平变换器及其损耗分析 J.供用电,2022,39(04):2-10.2 林辉,王博.NPC 三电平逆变器 IGBT 损耗计算 J.电子器件,2022,45(05):1162-1167.3 吴 志 红,何 耀 华.IGBT 损 耗 和 温 度 估 算 J.微 特 电机,2022,50(07):24-28.4 袁帅,荆龙,刘京斗,孙瑞东.三电平变流器的 DPWM 切换研究 J.电力电子技术,2022,56(09):130-134.5 郭寅远,李二海,任高全,曹元威.三电平光伏逆变器分段调制研究 J.电力电子技术,2021,55(12):110-113.(a)SVPWM 调制方式 (b)DPWM 调制方式图 5各工况瞬时损耗图 7DPWMA 调制方式下 PSIM 和计算损耗数据对比图 6DPWMA 和 SVPWM 调制方式下各工况开关损耗对比此设计的目标是通过摄像头图像处理完成对不良坐姿的检测和提醒，通过以上的测试发现，通过融合判断值和角度的换算，可以做到3左右的浮动误差，符合要求。但是也发现，该设计有一定的局限性，一是在位置的摆放问题，不能做到任意位置检测，如果人体前有很大的遮挡时就无法测量，二是在低头超过 35时人脸已经消失了一半，这种情况可能与摄像头的架设角度有关，也和坐姿角度算法本身的局限有关。如果可以做到人体骨骼的识别或者搭配陀螺仪设备在人体结合运算，那么精度将大幅提升也可以减少外界环境的误差。但是本设计依然可以完成大部分场景的测试，在室外强光的环境下依然可以正常运行，且整个算法的运行可以保证图像帧率在 30FPS 左右，如果产生了久坐也可以进行提示。整个系统的可扩展性比较高，可以继续添加其他功能。参考文献 1 吕松泽,王子牛,赵航,蒙鹏君,于少勇,李小涛.久坐的健康危害与运动干预的研究进展 J.当代体育科技,2021,11(36):168-172.2 王春阳.基于图像技术的人体坐姿监测研究 C.西安电子科技大学,2013.3 曾星,罗武胜,孙备,鲁琴,刘涛诚.基于深度图像的嵌入式人体坐姿检测系统的实现 J.计算机测量与控制,2017,25(09):8-12.4方劲.基于双目视觉的人体坐姿识别技术研究C.宁波大学,2020.5 胡应坤,张萍,赖健.具有坐姿纠正与人体感应的多功能智能台灯 J.电子世界,2021,(15):131-133.6刘步青,汪璞.坐姿检测专利技术综述J.河南科技,2019,(33):56-58.通信作者：金红。（上接第 13 页）