HyperSAE

HyperSAE 用稀疏自编码器从语言模型激活中抽取层级概念，并以双曲空间正则化编码父子关系。其关键做法是把双曲几何移出前向路径，实际编码仍走欧氏 SAE，训练时再约束权重，因此声称不会给推理增加双曲运算延迟。这个方向把概念发现与本体结构放进同一目标函数，不过仓库目前只有很少提交，复现实验和接口稳定性仍待积累。