智能健身动作识别:PP

在人工智能技术更迭及后疫情时代的背景下,随着居民生活模式发生改变,智能运动健身行业得到了极大的发展。刘畊宏带起的“本草纲目”健身热潮也正式开启了居家健身时代,随之而来的便是人们对个性化、智能化的健身动作识别、矫正、计数的强烈需求,如何随时随地进行便捷、标准的健身运动逐渐成为了人们热议的话题。

项目难点

非常规姿态多

在健身、舞蹈等场景中,人体姿态明显区别于常见的站姿,存在较多复杂的姿态。常见的公开数据集中往往缺少这类数据,因此在处理这类复杂姿态时,容易出现检测框位置或关键点位置不准确的问题,导致动作识别出现误检漏检,无法达到令人满意的效果。

模型体积与速度要求高

视频抖动严重

使用关键点算法处理视频数据时,由于预测针对单帧图像进行,在视频结果上往往会有抖动的现象。对于依靠精细化坐标的应用场景(如健身计数、基于关键点的虚拟渲染等),非常容易造成误检或可视化效果不流畅的问题。

关键点点数需求多变

方案设计

模型选型

PP-TinyPose的出世彻底打破了精度与速度无法兼得的难题,成为轻量级关键点检测的最佳选择。PP-TinyPose采用Top-Down的方式,先应用3.3M、150FPS的超轻量检测网络PP-PicoDet检测出人体,再用基于Lite-HRNet的移动端优化模型确保关键点检测的高精度,同时扩大数据集,减小输入尺寸,预处理与后处理加入AID、UDP和DARK等策略,保证模型的高性能。实现速度在FP16下达到122FPS的情况下,精度也可达到COCO数据集51.8%AP,不仅比其他类似实现速度更快,精度更是提升了130%!

数据准备

图3:数据准备

模型训练优化

更令人惊喜的是,在原版的基础上,针对体育健身场景难点,PP-TinyPose分别从场景数据多样性、检测模型迭代、关键点稳定性三个方向全面升级,发布了专为体育动作识别打造的增强版本,最终相比原版在健身场景数据上提升9.1%AP,实现速度85FPS,精度77.1%AP。同时,新增7个复杂动作的精准识别,包括侧身、卧躺、跳跃、高抬腿等非常规动作。具体来看:

场景数据多样性

图4:PP-TinyPose增强版效果对比图

检测模型迭代

关键点稳定性

加入OneEuro滤波器和EMA两种关键点稳定方式,将当前关键点坐标结果和历史关键点坐标结果结合计算,使得输出的坐标更加稳定平滑。

如果模型仍无法满足要求,开发者还可以基于飞桨目标检测开发套件PaddleDetection所提供的二次开发文档,进行模型训练及优化、关键点新增、删减与类别自定义,5分钟即可实现关键点检测个性化开发。

后处理逻辑

端侧部署

图8:端侧部署效果展示

如需更新模型并实现更丰富的健身动作识别,可参考以下流程:

作为轻量化骨骼点检测的开源SOTA算法,PP-TinyPose以精度速度高、微小目标识别效果好、多人检测速度快、端侧部署易用性强、体育健身动作检测准著称,在端侧微弱算力上,使用飞桨轻量化推理引擎PaddleLite,即可快速实现各类健身动作识别与计数!

THE END
1.AR+VR+AI,虚拟运动带来新体验!国务院印发的《全民健身计划(2021—2025年)》提出,推动线上和智能体育赛事活动开展,支持开展智能健身、云赛事、虚拟运动等新兴运动。2022年,工信部、教育部、国家体育总局等部门联合发布的《虚拟现实与行业应用融合发展行动计划(2022—2026年)》提出,“支持发展运动项目与虚拟现实技术融合”“提升虚拟健身的大众认知度”https://m.btime.com/item/40e5oed0u8a8npoonhib7k8u3c1
2.虚拟健身是什么意思虚拟健身是什么意思溺人深海 精选回答 虚拟健身,是指用各种花式偷懒,提高健身软件里面的步数,积分,时长。换取朋友圈炫耀的机会,以及自欺欺人的我并不是个肥宅心理安慰。 虚拟健身的常见方法包括: 把Keep训练打开后去看抖音。 把手机绑到猫身上以提高步数。https://edu.iask.sina.com.cn/jy/2qYgFQywY8b.html
3.虚拟健身我们引进了 200 多个团体健身课程的虚拟版本 — 莱美 (Les Mills) 课程,例如:BODYPUMP? 莱美力量和增肌训练、BODYCOMBAT? 莱美核心和燃脂训练、RPM? 动感单车和一些自由式健身课程,例如:P90X、Insanity 健身课程、高强度间歇训练法 (HIIT) 等。 https://www.pure-fitness.cn/shanghai/page/view/virtual_fitness
4.虚拟健身房下载虚拟健身房最新版下载虚拟健身房app下载虚拟健身房下载栏目提供了最全的虚拟健身房版本内容,喜欢这款软件的用户,可以下载最新的官方版本,还能够找到相同类型的APP,保证每一位来到这里的玩家都能够找到感兴趣软件版本。更新时间:2024-12-15虚拟健身房版本大全 官方版 虚拟健身房相关软件 懒人易健 安卓版 运动健身|27.21MB 爱活力 安卓版 运动健身|56.37https://shouyou.3dmgame.com/zt/20120_game/
5.健身模拟39问医生健身模拟是指通过虚拟现实技术进行的数字化健身体验,可以提供安全、便捷且多样化的锻炼方式。健身模拟利用虚拟现实技术为用户提供沉浸式健身体验,有助于改善心血管健康、增强肌肉力量。但长时间处于虚拟环境中可能导致眼睛疲劳、注意力分散等问题。针对特定疾病的症状识别与监测是关键所在。例如,对于高血压患者,需要关注血压https://wapask-mip.39.net/bdsshz/question/40639322.html
6.健身app开发新趋势人工智能+虚拟现实让你的健身更高效!人工智能(AI)和虚拟现实(VR)的结合正在为健身App开发带来新的趋势,使健身体验更高效、更有趣。以下是这些趋势的一些关键方面: 个性化训练计划:AI可以分析用户的身体状况、健身目标和训练历史,为每个用户创建个性化的训练计划。这有助于用户实现更快、更具体的健身结果。 http://www.apppark.cn/t-47768.html