首页
用于视频中人体动作检测的时频网络
返回

用于视频中人体动作检测的时频网络

2022-12-19 科技信息 By:佚名
最佳答案视频中的人体动作检测可应用于视频监控、人机交互和设备控制等领域。该任务需要一个具有 3D 形状的图像序列作为输入,以检测诸如跑步或接球之类的动作。通常,卷积神经网络 (CNN) 用于此任务。然而,他们只考虑时空特征,而使用频率特征会促进学习。最近 arXiv.org 上的一篇论文提出了一种时频域中...

视频中的人体动作检测可应用于视频监控、人机交互和设备控制等领域。该任务需要一个具有 3D 形状的图像序列作为输入,以检测诸如跑步或接球之类的动作。

通常,卷积神经网络 (CNN) 用于此任务。然而,他们只考虑时空特征,而使用频率特征会促进学习。最近 arXiv.org 上的一篇论文提出了一种时频域中的端到端单级网络。

3D-CNN 和 2D-​​CNN 分别用于提取时间和频率特征。然后,将它们与注意力机制融合以获得检测模式。实验证明了所建议的方法相对于其他最先进的模型的优越性。证明了利用频率特征进行动作检测的可行性。

目前,大多数用于视频中人体动作检测的深度学习方法都采用时空特征,然而,它们忽略了频域中的重要特征。在这项工作中,我们提出了一个同时考虑时间和频率特征的端到端网络,称为 TFNet。TFNet有两个分支,一个是由三维卷积神经网络(3D-CNN)构成的时间分支,以图像序列为输入提取时间特征;另一个是频率分支,通过二维卷积神经网络(2D-CNN)从DCT系数中提取频率特征。最后,为了获得动作模式,这两个特征在注意力机制下深度融合。

猜你喜欢
岱组词组(岱组词)

岱组词组(岱组词)

12-18 0 阅读
尿盆尿垢太厚怎么去除可以用84吗(尿盆尿垢太厚怎么去除)

尿盆尿垢太厚怎么去除可以用84吗(尿盆尿垢太厚怎么去除)

12-18 0 阅读
32开尺寸多大(32开的尺寸是多少厘米)

32开尺寸多大(32开的尺寸是多少厘米)

12-18 0 阅读
如何彻底粉碎微信聊天记录(如何彻底删除微信聊天记录)

如何彻底粉碎微信聊天记录(如何彻底删除微信聊天记录)

12-18 0 阅读
诺基亚800缺点(诺基亚800怎么样)

诺基亚800缺点(诺基亚800怎么样)

12-18 0 阅读
史艺(关于史艺的介绍)

史艺(关于史艺的介绍)

12-18 0 阅读
热门推荐
大望过喜是什么成语(大喜过望类似的成语有哪些)

大望过喜是什么成语(大喜过望类似的成语有哪些)

12-18 0 阅读
待机最长的智能手机(哪款智能手机待机长)

待机最长的智能手机(哪款智能手机待机长)

12-18 0 阅读
酒驾喝一瓶啤酒能测出来吗(喝一瓶啤酒能测出来吗)

酒驾喝一瓶啤酒能测出来吗(喝一瓶啤酒能测出来吗)

12-18 0 阅读
K271次(k271(k271时刻表))

K271次(k271(k271时刻表))

12-18 0 阅读
点点外卖平台(淘宝点点外卖)

点点外卖平台(淘宝点点外卖)

12-18 0 阅读
子网掩码怎么算(子网掩码255 255 255 0)

子网掩码怎么算(子网掩码255 255 255 0)

12-18 0 阅读
超极本玩游戏怎么样(超级本玩游戏效果好吗)

超极本玩游戏怎么样(超级本玩游戏效果好吗)

12-18 0 阅读
见闻色(见闻)

见闻色(见闻)

12-18 0 阅读
明基EX2510游戏显示器评测

明基EX2510游戏显示器评测

12-18 0 阅读
长城哈弗m3(我想知道长城M3到底是哪款车形请告知并附照片谢谢及及问)

长城哈弗m3(我想知道长城M3到底是哪款车形请告知并附照片谢谢及及问)

12-19 0 阅读