用冻结嵌入空间中的紧凑域足迹做生成式回放,无需保存切片或图块样本即可持续生成病理报告,并在多个公开持续学习基准上超过无样本与有限缓冲回放基线
核心概要
该工作提出一种无样本持续学习框架,用于全切片图像到病理报告的生成:在冻结的图块嵌入空间中为每个域构建紧凑“域足迹”(k-means 码本、切片级码字直方图库、图块数量统计与报告风格原型),据此合成伪全切片并由上一轮教师快照生成伪报告进行生成式回放,同时用风格前缀条件化语言模型;在多个公开持续学习基准上,该方法优于无样本与有限缓冲回放基线,并支持无需显式域标识的域无关推理。
Fig. 1. Overview of the proposed continual WSI report generation framework.
· 第 3 页深度剖析
提出以冻结图块嵌入空间中的紧凑域足迹表示每个域,使回放无需存储原始全切片图像或图块特征。 既有排练式持续学习依赖保存过去样本或特征,而该工作用 k-means 码本、切片级码字直方图库与图块数量统计替代样本存储。 方法描述明确给出足迹构成 F(t) = {C(t), H(t), µ(t)_N, σ(t)_N, r(t)},并说明码本由 k-means 聚类得到、直方图为归一化码字分配统计。
实现基于足迹的生成式回放:采样图块数量与直方图合成伪全切片,并由上一轮教师快照生成伪报告进行监督。 与需要真实过去样本的回放不同,该方法在无真实报告的情况下用即时教师提供伪目标,且因潜在生成发生在冻结空间而避免生成器漂移。 论文给出伪全切片合成流程(N ∼ N(µ(j)_N, (σ(j)_N)^2),从直方图分类分布采样码字)与教师生成伪报告的训练目标,并称性能与样本回放相当。
通过每域报告风格原型与风格前缀令牌处理报告规范漂移,并在推理时从切片信号推断最匹配的描述符,实现域无关生成。 提示式持续学习通常需要推理时提供任务或域标识,而该方法无需显式域标识即可选择风格描述符。 方法部分说明原型由冻结文本编码器均值池化并 ℓ2 归一化得到,经线性投影映射为前缀嵌入,风格令牌位置在损失中被掩码。
在多个公开持续学习基准上,该方法优于无样本与有限缓冲回放基线。 将足迹式生成式回放作为面向演进临床环境的实用方案提出,并在域增量场景下同时衡量报告质量与跨域保持。 摘要与引言报告了相对基线的优势,但所加载文本未给出具体数据集名称、指标数值或统计检验细节。
启示与展望
该框架面向域增量场景:训练按域(episode)顺序进行,每个 episode 只能访问当前数据集 Dt,不能回访早期样本。它适用于任何消费图块嵌入的全切片到报告生成器,论文以 HistoGPT 架构实例化。其设计目标是存储高效、不保留原始切片或图块样本,并在推理时无需显式域标识即可选择风格描述符,因此适合数据受治理限制、域标识缺失或不一致的机构环境。
所加载文本为全文,但实验部分的具体数据集名称、评价指标数值、消融实验与统计检验细节未在文本中呈现,因此无法在此核对“优于基线”的幅度与稳定性。此外,码本大小 K、风格令牌数 M、回放权重 λ 等超参数的具体取值与敏感性,以及伪全切片合成中高斯噪声对多样性的实际影响,均需在原文实验部分进一步确认。
