# 高温Marchenko-Pastur分布

只用训练好的最后一层权重算出的贝叶斯自由能，在卷积网络和大语言模型上都与模型质量强相关，并在重尾谱假设下给出一个最优重尾参数，训练中越过它就开始过拟合。

只用训练好的最后一层权重算出的贝叶斯自由能，在卷积网络和大语言模型上都与模型质量强相关，并在重尾谱假设下给出一个最优重尾参数，训练中越过它就开始过拟合。