#arXiv
共 9 篇
模型学的捷径，用反事实样本拔掉
论文提出在测试时生成反事实改动的做法，让模型少依赖训练集里的伪相关。读完能知道它成立的条件、代价，以及为什么不能当成万能补丁。
给 agent 出一场「持续学习」考试
120 道专业任务、每道五级台阶，最好的系统也只通关不到一半。读完能看清这个基准怎么计分，以及「会积累经验」和「会改一次」差多远。
一百个认知任务塞进同一套循环网络
一篇把 100 个认知任务同时训进同一套循环网络的论文发现：单任务能做，不代表放一起还能做。读完能知道干扰出在哪、该测什么。
给人推荐不同观点，光算距离不够
系统把「跟你想的不一样」压成一个分数，就分不出你们到底在哪件事上不一样。这篇论文把立场拆到概念层面做实验，N=63，结论比方法更有意思：多样性上去了，理解没上去。
AI 辅助决策想省人力，抽查也能守住错误上限
一篇 10 月论文把「AI 决策加人工抽查」做成了有数学保证的在线优化问题。读完能知道抽查比例怎么定才既省人力又封住漏审错误，为什么这套方法对数据分布不做假设。
softmax 和交叉熵里藏着两个数值 bug，有人给出修法
一篇 10 月论文指出教科书级的 softmax 与交叉熵实现里有两个数值 bug。读完能理解这两个 bug 怎么扭曲梯度、修掉之后能解决哪些训练怪象，为什么老代码也该查一查。
循环架构的显存账，有人靠共享缓存来平
一篇 10 月论文研究循环架构推理时缓存线性膨胀的问题。读完能知道为什么重复过同一组层会吃显存、让各轮共享缓存难在哪，以及实测吞吐和首字延迟能改善多少。
词表嵌入压到 4 比特，性能只丢百分之一
一篇 10 月论文系统测了把 n 元组嵌入表降到低比特会怎样。读完能知道嵌入层在显存里占多大、4 比特方案省了多少、为什么省下的空间还能反过来换性能。
思维链的解释可能是圆话，这篇论文把上下文隔离开来
一篇 10 月挂出的论文指出，思维链的解释可能只是事后圆话。读完能明白注意力怎么让推理步骤「装样子」，拆子问题、隔离上下文的做法换来什么，又付出什么。