基本信息:
- 专利标题： 一种基于骨架与知识图谱对比学习的动作识别方法
- 申请号：CN202510008818.6 申请日：2025-01-03
- 公开(公告)号：CN120088849A 公开(公告)日：2025-06-03
- 发明人： 谢林睿 , 齐晨雨 , 范婕 , 郭军
- 申请人： 西北大学
- 申请人地址： 陕西省西安市太白北路229号
- 专利权人： 西北大学
- 当前专利权人： 西北大学
- 当前专利权人地址： 陕西省西安市太白北路229号
- 代理机构： 西安恒泰知识产权代理事务所
- 代理人： 周春霞
- 主分类号： G06V40/20
- IPC分类号： G06V40/20 ; G06N5/022 ; G06N5/04 ; G06V10/82 ; G06V10/80 ; G06V10/764 ; G06N3/042 ; G06N3/049 ; G06N3/0455
摘要：
本申请涉及一种基于骨架与知识图谱对比学习的动作识别方法，通过大语言模型得到先验知识，其进一步被知识图谱编码器转化为用于对比学习的特征向量；同时构建实例库和特征库用于双分支对比学习；而后将时空通道自适应特征融合模块插入到骨架编码器的内部，以丰富特征库中的特征表达；通过骨架编码器和时空通道骨架编码器获得动作的特征信息，通过知识图谱编码器获得标准学习模板；最终在实例库和特征库中拉近正例推远负例来规范特征学习。本申请利用先验知识构造知识图谱作为模板来规范特征的学习，提升了模型对相似动作的判别能力，进一步提高了动作识别精度。