跳到主要内容
检索

# DINOv3

13 篇关联报道

订阅更新
  1. arXiv

    不训练也能查遥感变化:SpotDiff把像素级特征比对压到82.46 F1

    遥感变化检测通常依赖大量跨时相、像素级标注,跨区域和跨平台难以扩展。SpotDiff把DINOv3语义特征、AnyUp像素级特征重建与SAM 3文本引导区域提议组合成免训练流程,只在提议区域内比较两期重建特征的余弦相似度。在LEVIR-CD上,ViT-7B版本达到82.46 F1,比此前最强的免训练方法高2.06个点;SECOND上建筑变化IoU提升10.3。

  2. arXiv

    冻结的视觉模型直接读脑电:SeeEEG只学显示方式,八个数据集平衡准确率全胜脑电基础模型

    脑电基础模型在冻结特征迁移上表现不稳,SeeEEG换了个思路:把脑电按临床浏览器的蒙太奇、滤波和对比度设置渲染成图像,只训练这套显示参数,视觉主干全程冻结。以冻结的DINOv3 ViT-B为编码器,SeeEEG在八个临床、睡眠、情感与脑机接口数据集的平衡准确率上全部超过七个脑电基础模型,按Cohen或AUROC排名的平均名次为1.3,最强基线REVE为2.9。

  3. arXiv

    瑞士森林不再只标优势树种:30米网格给出10个树种的地径断面积占比

    瑞士全境森林的树种组成此前多以“每像素一个优势树种”呈现,伴生树种的比例被抹去。研究把0.1米航空RGB影像、机载激光扫描、AlphaEarth年度卫星嵌入与气候变量组合进一个以影像为锚的深度学习模型,用3992个瑞士国家森林清查样地的地径断面积观测训练,输出30米网格上10个主要树种与一个Other类的地径断面积占比。空间交叉验证的宏平均决定系数为0.485;在未参与建模的森林保护区数据上,30米像素级宏平均为0.552、样地级为0.733,像素与样地的优势类识别率分别为73.2%和81.1%。

  4. arXiv

    超声诊断不再只看平均准确率:多查询注意力保住异质证据,训练期正则把敏感度提到0.874

    患者级超声诊断此前多依赖单一注意力瓶颈聚合多视图,容易把稀疏的恶性征象稀释掉,并只优化总体准确率。C2LUE把聚合换成多查询交叉注意力,让多个可学习查询分别提取互补的形态学证据,并在训练中用一个可微的敏感度—特异度几何均值正则惩罚两类错误失衡。在活检证实的甲状腺与乳腺超声数据集上,患者级AUC达到0.932与0.936,敏感度提升到0.874与0.876,代价是特异度有所下降。

  5. arXiv

    MSU团队在可解释深度伪造检测挑战赛2026中提出伪掩码与局部对比学习方案,测试集检测准确率达0.9349、最终挑战分0.7456

    该工作面向XPlainVerse可解释深度伪造检测挑战,提出模块化检测与解释系统:检测端融合多个DINOv3骨干与Mesorch取证特征,并用Grounding-DINO将解释中的局部伪影描述转为弱块级伪掩码监督Artifact Evidence Map,再以局部块级对比目标分离伪影与真实证据;解释端用按类别条件选择的Qwen3-VL生成复杂解释并经GRPO优化简化模型,在完整测试集上取得0.9349检测准确率、0.5571解释分与0.7456最终挑战分。

  6. arXiv

    ViRA 用冻结视觉基础模型对齐规划器中间特征,在 NAVSIM v2 navtest 上把 Rap∗ 从 72.8 提升到 83.7 EPDMS,并推出 92.3 EPDMS 的 ViRA-Diffusion

    作者提出 ViRA——一种与规划器无关的视觉表征对齐框架,在训练时用冻结的视觉基础模型(VFM)中间特征监督规划器编码器,推理时丢弃对齐模块,从而不改变规划器结构与推理成本;在 NAVSIM v2 与 HUGSIM 上,ViRA 让回归式、扩散式与评分式三类规划器一致获得驾驶性能提升,且增益取决于 VFM 目标选择与规划器是否使用辅助感知监督。

  7. arXiv

    普渡大学提出免训练单样本分割框架,在池沸腾图像上将平均IoU较最强基线提升33.36个百分点

    该工作提出一种免训练的单样本科学图像分割框架,用一张带标注的参考图像将冻结的DINOv3与SAM组合起来:先以参考图像背景估计背景方向,对DINOv3的patch特征做背景自适应正交投影以抑制伪影方向,再用余弦相似度定位候选区域并生成提示交给SAM分割;在红细胞显微、结构光照池沸腾与胸部X线三类数据上评估,红细胞显微平均IoU较最强基线GF-SAM高5.15个百分点,池沸腾较INSID3高33.36个百分点,胸片与SAM2相当。

  8. arXiv

    DyRA 用输入自适应的输出残差校正改进结构化矩阵乘法近似,在 DINOv3 上实现 1.5 倍端到端 GPU 加速并将精度退化降低 3 倍以上

    该工作提出 DyRA,一种输入自适应方法,通过在推理时动态近似并校正结构化权重近似(如低秩分解)引入的输出残差误差,直接优化输出的低秩因子,从而在相同计算预算下更忠实地逼近完整矩阵乘法;在视觉、语音和语言模型上,DyRA 相比仅做结构化权重近似的方法持续改善精度-效率权衡,并在 DINOv3 上实现 1.5 倍端到端 GPU 加速,同时将精度退化降低 3 倍以上。

  9. arXiv

    HiRAE用深度分组残差预算融合DINOv3-L全部24层,把ImageNet-256重建FID从0.299降到0.209并让GenEval微调后升至87.70

    HiRAE提出一种分层表示自编码框架,把冻结DINOv3-L编码器的全部24层按深度分成浅、中、深三组,每组学习对最深层的残差修正并用逐组范数上限约束(越浅预算越紧),在保持潜变量token数与通道维度不变的前提下联合训练融合模块与解码器,使ImageNet-256重建FID从RAEv2的0.299降至0.209、PSNR从22.667升至26.377 dB、LPIPS从0.074降至0.043,引导生成gFID从1.060降至1.038,文本到图像在GenEval、DPG-Bench、GenAI-Bench上预训练与监督微调后均优于RAEv2,微调后GenEval从84.86升至87.70。

  10. arXiv

    FuseReg 用随机层子集训练解码器与 DiT,让单个解码器在完整、稀疏与单层融合下都能重建,并在生成器不变时降低 gFID

    该工作提出 FuseReg,把表征自编码器(RAE)中层融合的选择从固定启发式改为训练时对编码器层随机子集采样:在 ImageNet-256 与冻结 DINOv3-L 上,一个 FuseReg 解码器无需重训即可从完整、稀疏和单层融合重建,PSNR 高于专用于固定融合的解码器;仅替换解码器(RAEv2 DiT-XL 生成器不变)即降低无引导 gFID,联合正则化解码器与生成器在 DiT-Base 上进一步降低无引导 gFID。