国内刊号:32-1668/N
国际刊号:1671-7775
发布日期:
作者:黄金钾,詹永照,赵逸飞
单位: 江苏大学 计算机科学与通信工程学院, 江苏 镇江 212013
关键词: 计算机视觉, 时序动作检测, 注意力机制, 整体与局部相互感知, 图网络, 时空特征表达
基金: 国家自然科学基金资助项目(61672268)
针对目前动作检测与定位方法未综合利用整体与局部相互感知的时空关系信息、不利于提升动作检测与定位性能的问题,提出整体与局部相互感知的图网络时序动作检测方法.该方法综合利用各动作提案的特征相似性和时序重叠度构建整体关系图推理子网络,通过学习获得提案,该提案包含更丰富的整体时空特征表示;利用提案发生的时间偏序关系,构建局部关系图推理子网络,该子网络包含多个级别三体相似图和三体互补图的结构,通过学习获得不同时间尺度下提案的局部关系信息;最后构成整体与局部关系相互感知的丰富特征表达,用于动作检测与定位.采用平均精度均值作为评价指标在2个公开数据集(Thumos14和ActivityNet1.3)上进行了试验.结果表明,与PGCN、G-TAD、TAL-Net、CDC等先进方法相比,文中方法能有效提高动作检测的性能.
来源:2024年第1期
《江苏大学学报(自然科学版)》期刊编辑部