每日论文精读 #070:给视觉语言模型外挂一块可查找的视觉记忆
V-LUMEN 把 LLM 的查找式嵌入扩展搬到视觉侧:冻结码本离散化 + 空间哈希 + 文本条件哈希,让 VLM 容量随存储而非每 token 计算增长。
V-LUMEN 把 LLM 的查找式嵌入扩展搬到视觉侧:冻结码本离散化 + 空间哈希 + 文本条件哈希,让 VLM 容量随存储而非每 token 计算增长。
SWE-Shift:首个评测编码Agent在执行中途遭遇环境/需求变化的基准,17个系统全部大幅掉点,GPT-6 Astra从67%跌到25%。
用LLM为1036个安全对齐概念生成200万条概念-对立面配对故事,差值均值法提取的特征向量可探测、可转向,还能压制GCG越狱攻击。
Skill∞把技能优化流程本身编码成可自我改写的元技能:83个SkillsBench任务上60.7%超越人工技能(56.4%),自改进贡献4.8分,元技能还能跨模型跨harness复用。
用Banzhaf合作博弈归因发现:对失败的编码Agent,规格信息才是瓶颈资源,而3/4的前沿模型95%以上时候都在要反馈——收益还不如随机选。
用决策论框架给智能体记忆估值:区分潜在价值、保留价值与实现价值,暴露评测中的保存/使用/测量三层失效。
让LLM只输出意图而非命令,配合NeMo-Guardrails代理双闸门,把提示注入的注入召回率从25%提到94.5%
SWE-Journey基准揭示:面对软件架构师时模型功能测试通过率超75%,面对非程序员却不足25%,交互能力才是编码助手的真正瓶颈。
用LLM合成概念-对立面故事对,以均值差方式为1036个安全对齐概念批量提取特征向量,成本仅500美元,可探测、可操控模型行为。
TEPCA在证据层和参数层同时做时间对齐:时间约束的路径剪枝+互信息筛选保证证据链时序一致,时间条件化的DG-LoRA让低秩适配随查询时间动态变化,在ICEWS14/GDELT上刷新SOTA。
Future of Life Institute等机构系统评估19项实证研究:AI失控风险的现有证据仅支持「弱可信」判断,外部效度缺口普遍存在。
ELSI框架用熵最大化+CKA去冗余自动选择投机解码的中间层,超越EAGLE3的手工启发式,单个精选层即可打平三层的默认规则。
Netflix规模的实测:生成式推荐中单头自回归束搜索在排序与内容QA上全面胜过多Token预测,且训练成本仅为其1/2.6。
用封闭意图词表和NeMo-Guardrails代理双层架构,把LLM安全运营的注入召回率从25%提升到94.5%,且任何命令都不会被模型直接合成执行。
腾讯提出SWE-Journey基准:长程任务合成+人格化用户模拟,发现同一任务在软件架构师手中通过率78.5%,非程序员仅23%——瓶颈不是解题能力而是交互能力。