用于在线动作检测任务的自注意力视频流压缩方法及系统

专利信息

专利权人:山东大学

第一发明人:张伟

专利号:ZL202310049872.6

授权日:2024-4-30

专利类型:发明

国别:中国

专利简介

专利权人 山东大学 第一发明人 张伟
专利号 ZL202310049872.6 授权日 2024-4-30
专利类型 发明 国别 中国
所属领域 开放许可开始日期
开放许可截止日期 单次许可期限
许可费支付方式
本发明提出了用于在线动作检测任务的自注意力视频流压缩方法及系统,包括:提取视频流的特征并划分为长期历史特征和短期历史特征;基于自注意力对于长期历史特征进行压缩;对短期历史特征及压缩后的长期历史特征基于注意力进行融合建模;利用所建模型对长视频流数据进行处理输出当前帧的动作预测概率分布。使用基于自注意力机制的关键帧筛选策略,实现了对长视频流数据的有效压缩并保证了在线推理的高效性。