arXiv:2607.08733:「超级权重」揭示选择性微调失败之谜——COLM 2026接收论文
《LLM中的超级权重》是一篇被COLM 2026接收的论文,识别出「超级权重」——少量参数,其改变对语言模型行为产生不成比例的影响。论文表明,正是这些权重解释了为何仅对部分层进行选择性微调往往会失败,对PEFT和LoRA方法具有直接影响。
12 条新闻 — 🟡 7 值得关注 , 🟢 5 有趣
OpenWiki Brains是LangChain的开源框架,为AI代理提供主动记忆:自动从外部来源收集上下文并以Markdown文件形式保存在磁盘上。第一个版本支持6个连接器——Gmail、Notion、Git、Twitter/X、Hacker News和网络搜索——通过定时任务在本地运行,而非依赖云端。
该论文提出了一种利用博弈论减少大型语言模型幻觉的多智能体框架。模型之间的交互被建模为战略博弈者之间的博弈,其中均衡状态对应于一致且无幻觉的回答,提供了一条有别于标准RLHF和RAG方法的新路径。
Amazon SageMaker AI推出了NVIDIA Nemotron 3模型的无服务器定制化功能,无需管理基础设施。提供三种技术:SFT(监督微调)、RLVR(可验证奖励强化学习)和RLAIF(AI反馈强化学习),使企业团队无需机器学习基础设施知识即可使用先进的强化学习方法。
GitHub发现,将Copilot代码审查迁移到更好维护的工具后,结果起初变差了——原因不是工具,而是不适配新工具和实际工作流程的过时提示词。通过将提示词重写为diff优先方式(批量发现后再读文件,分析锚定在PR diff上),他们在保持同等质量的前提下将平均审查成本降低了约20%。
Deutsche Telekom与OpenAI签署了将运营商转型为AI原生电信公司的合作协议,应用领域涵盖客户支持、员工工具、网络运营和语音AI。Deutsche Telekom是欧洲最大运营商之一,全球约有2.45亿用户,使此次合作成为电信行业规模最大的AI交易之一。
Claude Code v2.1.206是Anthropic CLI工具的新版本,引入了带路径建议的/cd命令、建议精简CLAUDE.md文件的/doctor检查,以及在/commit-push-pr中自动批准推送到已配置远端的git push功能。后台代理现在在升级后立即更新,无需在下次连接时经历缓慢的升级过程。
Henry Schein One基于Amazon SageMaker开发了「Image Verify」AI系统,用于实时验证牙科X光影像质量。该系统已在10,000多个地点部署,每周处理超过1100万张X光影像,平均延迟1.4秒,旨在减少因影像质量差导致的保险理赔拒绝。
「过度思考」是一篇被ICML 2026接收的论文,表明增强大型语言模型的推理权重可以提取出模型通常不会暴露的隐藏学习信息。这一发现开辟了针对推理型模型(如o1、DeepSeek R1和开启长思考的Claude)的全新提取攻击类别。
CodeQL 2.26.0是GitHub静态安全分析工具的新版本,将AI提示注入攻击检测作为新分析类型引入,同时支持Kotlin 2.4.0。这是首次将AI特定攻击向量集成到主流SAST工具中,使提示注入与XSS和SQL注入进入相同的安全工作流程。