本发明属于深度学习、信号处理技术领域,提供了一种基于自适应双解码器的多目标跟踪方法及系统,包括:对视频数据切分为帧,依次通过基于自适应双解码器的目标检测与外观特征提取模型提取其边界框与对应的外观特征;在外观信息关联匹配过程,计算已有轨迹和当前帧检测之间的外观相似度矩阵,通过匈牙利算法实现两两最大匹配;在运动信息关联匹配过程,通过基于宽度预测的噪声自适应卡尔曼滤波预测轨迹在当前帧的预测框,以扩张宽度的方式计算当前帧预测框和预测框之间的DIOU运动相似度矩阵,通过匈牙利算法实现最大匹配;将得到视频的每一帧中每个对象的ID编号和预测框。本发明对于众多领域和高级计算机视觉任务具有重要应用和研究价值①