
导航:X技术最新专利计算;推算;计数设备的制造及其应用技术
1.本发明属于计算机图形处理技术领域,具体涉及一种实时轻量级2d人体姿态估计方法。
2.秦腔“形成于秦,精进于汉,昌明于唐,完整于元,成熟于明,广播于清,几经演变,蔚为大观答”,是相当古老的剧种,堪称中国戏曲的鼻祖。旧时,在中国西北辽阔的大地乃至西域国家,秦腔曾是老百姓最为喜爱和掌握的艺术形式。它简单灵活、轻松幽默、亲切随和,富有浓郁的地域特色和乡土气息。然而随着现代经济高速发展,互联网快速普及,国民大众的开云体育官方入口娱乐方式发生了变化。秦腔原始的娱乐性功能被削弱,受众群体老龄化,面临着生存和发展的危机。
3.通过对摄像头生成的视频流逐帧提取图像,采用基于openpose改进的方法对视频流中的人物进行实时人体姿态估计,以此用来进行实时人机交互,让人们可以边看秦腔戏曲视频边跟着学,极大地推动了秦腔文化的发展,以更加现代化的方式让人们重拾对传统戏剧的兴趣,体会秦腔这一传统中华文化的深厚艺术积累和丰富的人文内涵。
4.目前,2d人体姿态估计是一个热门的研究课题,涵盖了广泛的应用范围。人们已经尝试了许多方法来定位身体部位的解剖关键点。myers等人使用带有八个摄像头的运动捕捉系统研究了100名高尔夫球手挥杆时的臀部和躯干运动。fujimori等人开发了一套可穿戴套装可以用全身的触觉传感器和一个运动传感器来捕捉运动,以此来估计其方向。evans等人使用电磁运动捕捉系统来估计三维高尔夫挥杆运动。liu等人提出了一个康复系统,并使用kinect相机的骨骼定位模块从深度图像中捕获3d数据摄像机从深度图像中捕获3d数据,从单个图片中获得静态手势。这些传统的人体姿态识别方法缺乏准确性和即时性,并且在复杂的环境背景下表现不佳。
5.针对现有技术存在的不足,本发明的目的在于提供一种实时轻量级2d人体姿态估计方法,具有较高的实时性,以较低的设备成本运行,并以较低的计算量处理骨架数据,工作高效,同时对噪声的干扰具有很强的鲁棒性。
8.步骤1:对视频流提取出的视频帧图像进行预处理:以中心点为基准,将图像统一缩放裁剪;
9.步骤2:对步骤1得到的视频帧图像进行平滑处理,并抑制图像中的高斯噪声;
10.步骤3:将senet通道注意力机制融入到目标检测算法中,对步骤2得到的图像进行目标检测;
11.步骤4:在原始的openpose模型网络中,用深度可分离卷积为核心的mobilenet网
13.步骤6:将步骤5获得的人体骨骼关节点坐标通过贝塞尔曲线得到关节运动轨迹,并使用轨迹相似性度量算法得到关节间的距离数组;
18.优选的2d人体姿态估计,所述的步骤3中将senet通道注意力机制融入到tiny_yolov3目标检测算法中,对步骤2得到的图像进行目标检测。
19.优选的,所述的步骤4中用深度可分离卷积为核心的mobilenet网络替换openpose网络结构中的vgg19,同时采用residual结构的3个3
25.而深度卷积的卷积核尺寸大小为(dk,dk,1),共有m个,点卷积的卷积核尺寸大小为(1,1,m),共有n个,则深度卷积和点卷积的参数量为:
其中η表示的是深度可分离卷积参数量与传统卷积参数量的参数之比,wd表示的是深度可分离卷积参数量,w
本发明是一种实时轻量级2d人体姿态估计方法,首先通过高斯滤波消除图像中的高斯噪声,然后通过融入注意力机制的目标检测算法检测图像中的目标人物位置,再将检
而深度卷积的卷积核尺寸大小为(dk,dk,1),共有m个卷积核,点卷积的卷积核尺寸大小为(1,1,m),共有n个,则深度卷积和点卷积的参数量为:
其中,η表示的是深度可分离卷积参数量与传统卷积参数量的参数之比,wd表示的是深度可分离卷积参数量,w
步骤5:通过改进的openpose模型提取人体骨骼关节点坐标。识别结果如图7所示。openpose所能识别的关节点如图8所示。
步骤6:将步骤5获得的人体骨骼关节点坐标通过贝塞尔曲线得到关节运动轨迹,并使用轨迹相似性度量算法得到关节间的距离数组。计算结果如图9所示。
步骤7:利用线计算得到的关节间的距离数组进行分类,判断人物的姿态活动。分类结果如图10所示。整体框架如图11所示。
技术研发人员:耿国华;李启航;冯龙;王雨;赵燕婷;武浩东;周蓬勃;刘阳洋
1.计算机网络安全 2.计算机仿线.网络安全;物联网安全 、大数据安全 2.安全态势感知、舆情分析和控制 3.区块链及应用