赞
踩
python疲劳驾驶困倦低头检测主要使用了计算机视觉和深度学习技术,通过分析驾驶员的眼睛状态、头部姿态等信息来判断是否存在疲劳驾驶的风险,并及时提醒驾驶员驾驶安全。
1 课题背景
关于对疲劳驾驶的研究不在少数, 不少学者从人物面部入手展开。 人类的面部包含着许多不同的特征信息, 例如其中一些比较明显的特征如打哈欠、 闭眼、 揉眼等表情特征可用来作为判断驾驶员是否处于疲劳状态的依据。 随着计算机技术的不断发展, 尤其是在人工智能相关技术勃发的今天, 借助计算机可以快速有效的识别出图片中人脸特征, 对处于当前时刻驾驶员的精神状态做出判断, 并将疲劳预警信息传达给司机, 以保证交通的安全运行, 减少伤亡事故的发生。
2 实现目标
经查阅相关文献,疲劳在人体面部表情中表现出大致三个类型:打哈欠(嘴巴张大且相对较长时间保持这一状态)、眨眼(或眼睛微闭,此时眨眼次数增多,且眨眼速度变慢)、点头(瞌睡点头)。本实验从人脸朝向、位置、瞳孔朝向、眼睛开合度、眨眼频率、瞳孔收缩率等数据入手,并通过这些数据,实时地计算出驾驶员的注意力集中程度,分析驾驶员是否疲劳驾驶和及时作出安全提示。
3 当前市面上疲劳驾驶检测的方法
学长通过对疲劳驾驶在不同方法下研究进展的分析, 可以更清晰的认识的到当下对该问题较为有效的判定方法。 根据研究对象的不同对检测方法进行分类, 具体分类方法如图
在这里插入图片描述
基于驾驶员面部特征的检测方法是根据人在疲劳时面部变化来分析此时的精神状态。 人在瞌睡、 疲劳时面部表情与清醒时有着明显的区别。 通过装置在车辆中的摄像头对驾驶员人脸图片的采集, 利用计算机图像处理和模式识别, 可以有效检测驾驶员的疲
劳特征信息, 比较直观的特征有: 打哈欠, 眨眼, 低头等。
python疲劳驾驶困倦低头检测
- def get_head_pose(shape): # 头部姿态估计
- # (像素坐标集合)填写2D参考点
- # 17左眉左上角/21左眉右角/22右眉左上角/26右眉右上角/36左眼左上角/39左眼右上角/42右眼左上角/
- # 45右眼右上角/31鼻子左上角/35鼻子右上角/48左上角/54嘴右上角/57嘴中央下角/8下巴角
- image_pts = np.float32([shape[17], shape[21], shape[22], shape[26], shape[36],
- shape[39], shape[42], shape[45], shape[31], shape[35],
- shape[48], shape[54], shape[57], shape[8]])
- # solvePnP计算姿势——求解旋转和平移矩阵:
- # rotation_vec表示旋转矩阵,translation_vec表示平移矩阵,cam_matrix与K矩阵对应,dist_coeffs与D矩阵对应。
- _, rotation_vec, translation_vec = cv2.solvePnP(object_pts, image_pts, cam_matrix, dist_coeffs)
- # projectPoints重新投影误差:原2d点和重投影2d点的距离(输入3d点、相机内参、相机畸变、r、t,输出重投影2d点)
- reprojectdst, _ = cv2.projectPoints(reprojectsrc, rotation_vec, translation_vec, cam_matrix, dist_coeffs)
- reprojectdst = tuple(map(tuple, reprojectdst.reshape(8, 2))) # 以8行2列显示
-
- # 计算欧拉角calc euler angle
- rotation_mat, _ = cv2.Rodrigues(rotation_vec) # 罗德里格斯公式(将旋转矩阵转换为旋转向量)
- pose_mat = cv2.hconcat((rotation_mat, translation_vec)) # 水平拼接,vconcat垂直拼接
- # decomposeProjectionMatrix将投影矩阵分解为旋转矩阵和相机矩阵
- _, _, _, _, _, _, euler_angle = cv2.decomposeProjectionMatrix(pose_mat)
-
- pitch, yaw, roll = [math.radians(_) for _ in euler_angle]
-
- pitch = math.degrees(math.asin(math.sin(pitch)))
- roll = -math.degrees(math.asin(math.sin(roll)))
- yaw = math.degrees(math.asin(math.sin(yaw)))
- print('pitch:{}, yaw:{}, roll:{}'.format(pitch, yaw, roll))
-
- return reprojectdst, euler_angle # 投影误差,欧拉角
-
-
- def eye_aspect_ratio(eye):
- # 垂直眼标志(X,Y)坐标
- A = dist.euclidean(eye[1], eye[5]) # 计算两个集合之间的欧式距离
- B = dist.euclidean(eye[2], eye[4])
- # 计算水平之间的欧几里得距离
- # 水平眼标志(X,Y)坐标
- C = dist.euclidean(eye[0], eye[3])
- # 眼睛长宽比的计算
- ear = (A + B) / (2.0 * C)
- # 返回眼睛的长宽比
- return ear
-
-
- def mouth_aspect_ratio(mouth): # 嘴部
- A = np.linalg.norm(mouth[2] - mouth[9]) # 51, 59
- B = np.linalg.norm(mouth[4] - mouth[7]) # 53, 57
- C = np.linalg.norm(mouth[0] - mouth[6]) # 49, 55
- mar = (A + B) / (2.0 * C)
- return mar
-
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。