伪时空图卷积网络修复姿态引导的Transformer行人视频修复方法

伪时空图卷积网络修复姿态引导的Transformer行人视频修
复方法
唐福梅;聂勇伟;余嘉祺;张青;李桂清
【期刊名称】《计算机辅助设计与图形学学报》
【年(卷),期】2024(36)4
【摘要】为解决监控视频中被遮挡行人的修复问题,提出了一种基于人体姿态的行人视频修复方法,即先修复视频中残缺的行人姿态序列,然后在修补后的姿势序列的引导下修复视频帧中人体的缺失部分.该方法采用OpenPose从视频中提取被遮挡的人体姿态序列,针对其因存在遮挡情况导致未识别出和未准确识别部分关节点的问题,提出了一种伪时空图卷积网络模型对缺失姿态进行修复,得到一个相对准确的姿态序列;基于修复后的姿态,提出了基于姿态序列引导的Transformer行人视频修复模型.在Human3.6M数据集上进行了测试,所提出的方法在4个指标PSNR,RMSE,SSIM,LPIPS上均比对比方法有提升,特别是RMSE指标提升了
9.50%,LPIPS指标提升了21.67%.
【总页数】13页(P552-564)
【作者】唐福梅;聂勇伟;余嘉祺;张青;李桂清
【作者单位】华南理工大学计算机科学与工程学院;中山大学计算机学院
【正文语种】中文
【中图分类】TP391.41
【相关文献】
1.基于时空图卷积网络的视频中人物姿态分类
2.基于图卷积网络与自注意力图池化的视频行人重识别方法
3.基于骨架的双模注意力时空图卷积网络人体动作识别方法
4.基于潜在特征的时空图卷积网络轨迹预测方法
5.基于姿态估计和Transformer模型的遮挡行人重识别
因版权原因，仅展示原文概要，查看原文内容请购买。