跳到主要内容
检索

Mengjie Hu

1 篇关联报道

订阅更新
  1. researchsquare.com

    多模态跟踪不再并行改两路:CCLT让第二次修正读到刚改过的状态,只训0.212%参数

    RGB-X跟踪把可见光帧与热红外、深度或事件数据配对,但配对标注远少于RGB预训练数据,因此通常只微调少量参数。以往的双向跨模态修正把两个方向并排计算,都读取未修正的输入状态,后一次修正无法利用前一次的结果。CCLT在冻结骨干的第6和第10个Transformer块插入低秩交换模块,让一个方向先修正、另一方向再读取刚被修正的状态,并以参数量匹配的并行版本作对照:在LasHeR上平均SR提高1.980点,95%区间为[0.360,2.690],可训练参数为196.6K,占92.7M参数跟踪器的0.212%。

已读完全部报道