SLOWFAST TIMESFORMER行为检测

风险提示：为保障交易双方的利益，平台会为托管资金做担保。线下交易有极大风险，且平台不做任何安全保证！

项目固顶：固顶将大大增加您所发布项目的应征机率并在固顶项目分类中永久展现。您还可以续费再次固顶项目，争取早日找到合适的项目承包方。

一对一服务：平台项目专员全程一对一跟进您的项目，电话通知人才库有能力的承接人竞标，平台全力服务直到您的项目完成为止。

超低服务费：接包方提现时，平台方只收取5%服务费，平台交易能够保障双方的信任和资金安全，确保项目顺利完成。

缴纳保证金可提高中标机会，但如果是承接人原因导致项目不能如约完成的，保证金将赔付给发包人。

发布新项目：免费发布项目，就可以与论坛近千万经管会员沟通需求，找到合适的承接方，免费体验平台服务

项目详情

项目名称：SLOWFAST TIMESFORMER行为检测 [已结项]

分类：模型/建模
发布者：小三***_5_
点击量：670
发布时间：2022-3-6 08:56
项目关键词：
项目描述： 1.数据情况：如下excel
自定义AVA数据集，数据集很大，有2000+个30s视频，按每秒30fps分好帧，数据集已标记，标记的app是用一个开源软件做的，22类，如果需要的话，可以后续提供数据集的csv文件格式，考虑到数据集很大，直接传可能需要很多时间
2.需求：
（1）基于slowfast和timesformer的行为识别，原代码开源，github上能直接搜到，
slowfast:https://github.com/facebookresearch/SlowFast
论文地址：https://openaccess.thecvf.com/content_ICCV_2019/html/Feichtenhofer_SlowFast_Networks_for_Video_Recognition_ICCV_2019_paper.html
Timesformer:https://github.com/facebookresearch/TimeSformer
论文地址：https://arxiv.org/abs/2102.05095
需要在已有自定义ava数据集基础上，把slowfast的forward的resnet替换为timesformer，timesformer代码基于slowfast改的，实现双通道+注意力机制。如果可以的话，再加一个创新点，并修改损失函数为gmh或者focalloss
目前slowfast能跑通，但是基于timesformer的slowfast代码改不来，并且timesformer的yaml文件只支持kinetics和SSv2数据集，也不会改，所以本想把数据集搬到timesformer代码上跑一遍也没成功,之前想改slowfast的损失函数，但是各种报错。
（2）最终结果：输出各种用于分类的可视化图表（灵敏度sensitive、召回率recall、精确率accuracy、F-1值、ROC和AUC曲线、混淆矩阵、PRC等
（3）结束以后，源代码需要给我哦，难点麻烦注释，解答一下相关问
项目附件：承接人可见
项目预算： 4000（未托管）
分享：