动态

Yann LeCun团队发现JEPA可隐式估计数据密度,提出JEPA-SCORE

Yann LeCun团队发现JEPA可隐式估计数据密度,提出JEPA-SCORE
机器之心 JIQIZHIXIN
Yann LeCun团队持续推进JEPA。他们的新研究发现,联合嵌入预测架构(JEPA)中的防坍塌项不仅防止平凡表示,还隐式估计数据密度。这意味着任何训练好的JEPA(如I-JEPA、DINOv2或MetaCLIP)都可以利用其雅可比矩阵以闭式形式计算样本概率——免费实现数据整理、异常检测和密度估计。基于此发现,他们提出了JEPA-SCORE:将自监督编码器转变为高效、理论基础的密度估计器——无需重新训练。
动态机器之心 JIQIZHIXIN2025-10-08原文

相关内容