来源:期刊VIP网 时间:
作者:陈迪;李焱芳;毕卫云;李朗;蒲珊珊;
单位:空军军医大学基础医学院;空军军医大学第一附属医院;
摘要:为拓展机器视觉技术在医工结合场景下的应用,文中基于改进的时空Transformer模型,提出一种动作规范识别模型。该模型由数据嵌入层、时空Transformer层、决策融合层组成。数据嵌入层利用Openpose模型从sRGB图像中提取人体骨骼数据,降低环境部署成本;时空Transformer层使用时空模块和块间模型对图像数据特征进行训练和分类,提升原模型的分类精度;决策融合层实现对应用场景的规范性判别。实验测试结果表明:所提算法的TOP1和TOP5精度指标在所有对比算法中均为最优;在以心肺复苏术为例进行的实际应用测试中,该算法的综合性能较为理想,能够满足工程需要。
关键词:计算机视觉;;时空Transformer模型;;骨骼模型;;决策融合;;动作识别;;多头注意力机制
基金资助:陕西省“十四五”教育科学规划课题(SGH22Y1356)