首页
用于视频中人体动作检测的时频网络
返回

用于视频中人体动作检测的时频网络

2022-12-19 科技信息 By:佚名
最佳答案视频中的人体动作检测可应用于视频监控、人机交互和设备控制等领域。该任务需要一个具有 3D 形状的图像序列作为输入,以检测诸如跑步或接球之类的动作。通常,卷积神经网络 (CNN) 用于此任务。然而,他们只考虑时空特征,而使用频率特征会促进学习。最近 arXiv.org 上的一篇论文提出了一种时频域中...

视频中的人体动作检测可应用于视频监控、人机交互和设备控制等领域。该任务需要一个具有 3D 形状的图像序列作为输入,以检测诸如跑步或接球之类的动作。

通常,卷积神经网络 (CNN) 用于此任务。然而,他们只考虑时空特征,而使用频率特征会促进学习。最近 arXiv.org 上的一篇论文提出了一种时频域中的端到端单级网络。

3D-CNN 和 2D-​​CNN 分别用于提取时间和频率特征。然后,将它们与注意力机制融合以获得检测模式。实验证明了所建议的方法相对于其他最先进的模型的优越性。证明了利用频率特征进行动作检测的可行性。

目前,大多数用于视频中人体动作检测的深度学习方法都采用时空特征,然而,它们忽略了频域中的重要特征。在这项工作中,我们提出了一个同时考虑时间和频率特征的端到端网络,称为 TFNet。TFNet有两个分支,一个是由三维卷积神经网络(3D-CNN)构成的时间分支,以图像序列为输入提取时间特征;另一个是频率分支,通过二维卷积神经网络(2D-CNN)从DCT系数中提取频率特征。最后,为了获得动作模式,这两个特征在注意力机制下深度融合。

猜你喜欢
神舟七号的资料介绍(神舟七号的资料)

神舟七号的资料介绍(神舟七号的资料)

12-18 0 阅读
徒手开红酒的方法图解完整(徒手开红酒的方法图解)

徒手开红酒的方法图解完整(徒手开红酒的方法图解)

12-18 0 阅读
伊童欣(关于伊童欣的介绍)

伊童欣(关于伊童欣的介绍)

12-18 0 阅读
个人一周工作总结报告(个人一周工作总结)

个人一周工作总结报告(个人一周工作总结)

07-06 0 阅读
ipad快播怎么下载(快播ipad版)

ipad快播怎么下载(快播ipad版)

12-18 0 阅读
全国地方彩票结果

全国地方彩票结果

12-18 0 阅读
热门推荐
2021名校课堂七年级上册数学答案 南方出版传媒

2021名校课堂七年级上册数学答案 南方出版传媒

12-19 0 阅读
loctite(关于loctite的介绍)

loctite(关于loctite的介绍)

12-19 0 阅读
折柳相送的柳是什么的象征(分别是折柳相送的寓意)

折柳相送的柳是什么的象征(分别是折柳相送的寓意)

11-11 0 阅读
u盘格式化后数据恢复需要多久(u盘格式化后数据恢复)

u盘格式化后数据恢复需要多久(u盘格式化后数据恢复)

12-18 0 阅读
华为mate30参数配置详情介绍(华为mate30参数配置(华为mate30参数配置4G))

华为mate30参数配置详情介绍(华为mate30参数配置(华为mate30参数配置4G))

12-18 0 阅读
我的遥远的清平湾读后感800字(我的遥远的清平湾)

我的遥远的清平湾读后感800字(我的遥远的清平湾)

12-18 0 阅读
鲍比布朗(关于鲍比布朗的介绍)

鲍比布朗(关于鲍比布朗的介绍)

12-18 0 阅读
网贷骚扰电话举报(骚扰电话 举报)

网贷骚扰电话举报(骚扰电话 举报)

12-18 0 阅读
手机百度网盘怎么下载文件(手机百度网盘怎么下载)

手机百度网盘怎么下载文件(手机百度网盘怎么下载)

12-18 0 阅读
微软Windows10的时间轴功能即将消失

微软Windows10的时间轴功能即将消失

12-18 0 阅读