MemeMind:全错样本如何破局?离线轨迹重构让Agent能力提升22%
来自哔哩哔哩(Bilibili)与复旦大学的研究团队在最新论文中提出了 MemeMind 框架,专门针对这一盲区提出了破局方案。MemeMind 的核心亮点在于 参考答案引导的工具轨迹重构 :它在离线阶段利用终局的参考答案,由专门的模块反推所需证据,主动调度异构工具完成检索、裁切与交叉验证。
来自哔哩哔哩(Bilibili)与复旦大学的研究团队在最新论文中提出了 MemeMind 框架,专门针对这一盲区提出了破局方案。MemeMind 的核心亮点在于 参考答案引导的工具轨迹重构 :它在离线阶段利用终局的参考答案,由专门的模块反推所需证据,主动调度异构工具完成检索、裁切与交叉验证。
为此,他们提出了一种名为 OEO (Open-Ended Optimization,开放式优化)的极简范式:框架仅负责严格锁定目标、预算、权限和评测红线,而把“何时收集证据、如何诊断失败、提出何种粒度的修改以及何时停止”的全部过程控制权,彻底交给前沿优化器在线自主编排。
针对这种执行失真,研究团队提出了 TRACE ( Trajectory-Relative Agent Context ComprEssion )框架。该方法抛弃了依靠终局任务成败做逆向归因的粗粒度反馈逻辑,转而在发生压缩的“截断边界”处,通过成对的闭环局部续写来直接度量压缩带来的额外执行退化。
来自 IBM Research 的研究者在论文《Optimize Cheap, Deploy Strong: Cost-Aware Cross-Tier Transfer for Evolutionary Optimization》中提出了一个反直觉的疑问: 我们真的必须在目标模型上运行整个搜...
这项工作将这一现象定义为 语义物化 ( Semantic Materialization ),并系统性地提出了面向稀疏事件 KV 服务的“内存契约”(Memory Contract)。
来自 ELLIS、UIUC、Together AI 以及德克萨斯大学奥斯汀分校等机构的联合研究团队,在最新论文中揭开了这一缺失的优化层,并提出了一种专为后训练量身定制的新范式:等谱优化(Isospectral Optimization,简称 ISO)。
面对上述困境,WitCert 提出了极为精巧的几何分解方案,其理论核心建立在对 RoPE 结构的频域洞察之上。研究团队指出,RoPE 在数学本质上是一个关于频率对(Frequency Pairs)的分块对角正交变换。
FutureBridge-OPD:来自美团等机构的研究者在论文《Look Ahead Before You Distill: Future Trajectory Validation of Teacher Guidance for Agentic On-Policy Distillation》...
实验结果显示,以 GLM-5.2 作为驱动底座的 OneDayAgent 取得了 0.821 的综合得分,显著超越基准官方测试的各类通用智能体方案。在遵循指令、事实准确性、逻辑完备性等维度,以及无论是否携带多模态附件的测试组中,该方案均取得了全面领先。消融实验进一步证实了各个模块的必要性。
针对这一核心痛点,来自阿里巴巴集团、厦门大学、浙江工商大学和浙江大学的研究团队提出了 Search2Skill 框架。该研究一改过去闭门造车式的反思路线,转向“向外看”(Outward-Looking)的主动探索机制:让模型在感知到自身能力短板时主动调用外部搜索。
研究团队据此提出了 门控后视蒸馏(Gated Hindsight Distillation, 简称 GHD) 。该方法在训练时引入一个参数完全共享的“教师视角”,让它额外观察到下一帧真实截图,从而利用事后诸葛亮式的后验视角为推理与动作重新打分;同时设计了严格的门控机制。
来自蚂蚁集团、普林斯顿大学与斯坦福大学的研究团队在最新论文中给出了截然不同的解法,他们提出了名为 AQuA (Recursively Self-Improving Quantitative Trading Research Agents)的量化投研系统。
由 Scale AI 团队主导的最新研究提出了 HarnessOpt-Bench ,这是业内首个针对“端到端自动化 Harness 优化”建立的标准化评测基准。这项研究跳出了过去各家系统在自选题目、自定规则下的“自嗨式优化”,搭建了一套具备严格隔离防护与预算控制的可信评测协议。
在大模型工程落地的世界里,训练后量化(Post-Training Quantization, PTQ)早已是事实上的行业标准。绝大多数团队在部署开源模型时,都默认 4-bit 权重属于“几乎无损”的安全区,3-bit 往往伴随着不确定性,而 2-bit 则被普遍视为不可用的性能废墟。
针对这一核心矛盾,Alaya Lab 提出了全栈开源的交互式长程视频世界模型 AlayaWorld 。该模型基于约 15B 参数的视频扩散 Transformer(DiT)骨干,能够在 540p 和 720p 分辨率下持续输出 24 fps 的稳定视频。
Solar Open 2 提出了一种名为“选择性权重迁移”(Selective Weight Transfer)的热启动策略,打破了传统认知中“架构大幅改变必须从头预训练”的铁律。模型上一代版本 Solar Open 1 采用纯 Softmax 骨架,路由专家数为 128 个。
KV:这印证了近期关于推理模型注意力汇点(Attention Sink)的研究发现:句末及结构标记往往汇聚了对整段推理逻辑的高阶语义概括。然而,更具普适性、更强劲的解法是 延迟未来查询 。
为了打破这一“能力天花板”,来自北京理工大学和深圳北理莫斯科大学的研究团队提出了一种全新的 零阶自进化框架 。该方法彻底跳出了“必须先采出正确轨迹才能训练”的传统思维,而是对大模型的 LoRA 参数施加微小扰动,仅依据最终答案计算连续的困惑度损失差。
他们提出了 隐式在线自蒸馏(Latent On-Policy Self-Distillation,简称 LOPD) 。该方法将特权上下文重构成一个端到端可学习的隐空间连续向量,不仅彻底摆脱了人工规则对经验形态的束缚,更在工具调用与代码生成两大高壁垒场景下。
针对这一瓶颈,来自东方理工大学、上海交通大学与西安交通大学的研究团队提出了 ReCache 。该框架通过三大递进机制打破了工具调用的缓存困局:用“资源级注意力”切断不同工具之间的横向交互,赋予每个工具完全独立的局部坐标,使其 KV 块具备天然的组合不变性。
针对这些根本缺陷,来自 MBZUAI、麦吉尔大学等机构的研究团队提出了 SCAFFOLD 框架。通过多实例参数化抽象、递归组合、基于最小描述长度(MDL)的库压缩,以及周期性的权重蒸馏,SCAFFOLD 彻底打通了从“动作轨迹”到“深层程序抽象”再到“模型内生能力”的自进化闭环。
来自抖音集团(Douyin Group)与上海交通大学的研究团队提出了 SWE-Pruner Pro,推翻了这种“依赖外部判别器”的惯性路径。他们发现了一个极具启发性的现象: 当代码大模型在阅读环境返回的工具输出时。
加州大学伯克利分校等机构的研究者在论文《Twin Agent: Context Residual Compression for Privilege Separated Agents》中提出了一个破局视角: 智能体的安全防御,本质上是一个“跨信任边界的信息流压缩问题” 。
针对这一问题,本文提出了一种轻量且通用的后训练框架—— TAPO (Transition-Aware Policy Optimization)。该方案的核心突破在于: 不采集任何额外的专家数据,不增加任何多余的在线采样环境交互,也不在推理时引入额外的计算负担。