InfoNCE Induces Gaussian Distribution
InfoNCE 诱导高斯分布
机构 * Technion - Israel Institute of Technology(技术学院-以色列理工学院)
AI总结 本文证明对比学习中的 InfoNCE 损失函数会使表示学习产生高斯分布结构,通过理论分析和实验验证了这种高斯行为。
Comments Accepted to ICLR 2026, Oral
高校专区
InfoNCE 诱导高斯分布
机构 * Technion - Israel Institute of Technology(技术学院-以色列理工学院)
AI总结 本文证明对比学习中的 InfoNCE 损失函数会使表示学习产生高斯分布结构,通过理论分析和实验验证了这种高斯行为。
Comments Accepted to ICLR 2026, Oral
图学习应超越对谱图神经网络和消息传递图神经网络的狭隘观点
机构 * RWTH Aachen University(亚琛工业大学) ; Massachusetts Institute of Technology(麻省理工学院) ; École Polytechnique Fédérale de Lausanne(洛桑联邦理工学院) ; Stanford University(斯坦福大学) ; University of California San Diego(加州大学圣地亚哥分校) ; Univ. de Montréal(蒙特利尔大学) ; Mila(Mila人工智能研究所) ; Technion – Israel Institute of Technology(技术学院–以色列理工学院)
AI总结 本文澄清了谱图神经网络与消息传递图神经网络的异同,提出基于特征基对称性的谱GNN精确定义,并倡导统一理论框架以推动图学习发展。
Comments 44 pages, 1 figure