热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

【深度学习】YOLOPose人体关键点估计人体姿态估计

论文:https:arxiv.orgabs2204.06806代码:https:github.comTexasInstrumentsedgeai-yol




论文 : https://arxiv.org/abs/2204.06806
代码:
https://github.com/TexasInstruments/edgeai-yolov5
https://github.com/TexasInstruments/edgeai-yolox


效果

yolov5+oks损失,效果好到没朋友:
在这里插入图片描述


模型结构

在这里插入图片描述
在head出的特征里,每个关键点增加3个变量输出,即是{x坐标,y坐标,conf置信度},17个人体关键点就有51个变量:
在这里插入图片描述


评价指标OKS

https://zhuanlan.zhihu.com/p/48601321
在这里插入图片描述


损失函数

论文作者觉得L1损失并不能很好表述OKS指标,遂设计了自创的oks损失:

在这里插入图片描述
还需要关键点置信度损失:

在这里插入图片描述
那么整个模型的损失是:
在这里插入图片描述


关键点置信度

训练的时候,可以看见置信度就是1,否则就是0。 推理阶段,只保留置信度大于0.5的关键点。
在这里插入图片描述


yolov7-pose

https://github.com/WongKinYiu/yolov7
原图:
在这里插入图片描述
结果图:
在这里插入图片描述


TODO

学习:论文里提到的一些 bottom-to-up 的pose模型,基于heatmap模型。







推荐阅读
author-avatar
书友79805954
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有