The Emergent Symbolic Structure of Artificial Neural Networks
arxiv.org原文 ↗
研究把多种网络的向量表征近似为实例化符号结构的闭式方程,替换表征生成过程后行为仍大体保持。证据横跨列表操作小网络与 LLM 的算术、逻辑、代码、语言四域;对隐空间做精确干预还能定向改变输出,说明所识别结构不只是事后可视化。
–浏览
arxiv.org原文 ↗
评论 · Comments