神经网络是完成机器学习任务的基本模型，其中一类重要的神经网络是玻尔兹曼学习机。它和它的变体是在上世纪八十年代被提出来的，但是经过三十多年的研究，这些模型在表达能力的理解、配分函数的计算和训练深层模型的高效算法等方面仍然发展不完善。近些年，一些物理学家 ...

白小交 西小风 发自 凹非寺量子位 | 公众号 QbitAI 刚刚，EMNLP 2024最佳论文奖新鲜出炉！ 5篇中榜论文中，华人学者参与三篇，分别来自CMU、上海交通大学、中国科学院大学等机构。 其中，Pretraining Data ...

【摘要】 ...