工程笔记
写给真正
交付技术栈的人
关于 React、Node.js、TypeScript 与 AI 的原创文章,来自与我们操作层软件同一套工程实践。正文为英文。
标签:interpretability
神经网络中的叠加现象:简化模型、SAE与特征融合
网络如何存储比维度更多的特征,干扰成本是什么,以及为什么稀疏自编码器能够融合数据无法区分的特征。
阅读约 19 分钟模型差异检测工具的发现:风格变化掩盖了细微的微调效果。
一个模型差异检测工具对一个金融领域的LoRA微调进行了审核:82%的检测案例发现了长度与结构的变动,而预期的推理变化却未被发现。
阅读约 15 分钟单独复制可行,组合使用则失败:通过孤立复制测试的标记在上下文中的脆弱性。
测试八种开放权重模型,筛选出那些单独复制时正确但置于上下文中会被丢弃或修改的标记,并对嵌入几何结构、任务保持性及工具使用情况进行检查。
阅读约 32 分钟脆弱标记与无声替换:对某些幻觉的几何学解释
部分幻觉源于受损或脆弱的标记,在推理开始前就被替换为附近的标记。文中给出了示例、各模型的发生率以及一个简单测试。
阅读约 7 分钟
常见问题
关于这些文章
是。每篇都是为本站准备的英文原创改写。结构与代码跟随来源;正文重写并做过重合检查。
技术文先发英文,以保证代码与 API 名称准确。站点外壳提供全部九种语言。
草稿经编辑后进入发布队列。站点导入只收录新的或有变更的 slug,不会重复添加。
示例仅供说明。上线前请核对技术栈与许可。若需交付,请发来简报。