ModularRSI: Modular and Generalizable Recursive Harness Self-Improvement 精读
harness 自改进的泛化性危机:在评测基准上演化=对测试集过拟合,单轨迹更新把系统性缺陷与实例细节纠缠。ModularRSI 三重解法——benchmark-disjoint(2000 个外部演化任务与评测基准不相交)、对比式信用分配(同任务成功/失败轨迹对比聚合跨任务证据)、模块化定位(缺陷归因到 harness 具体组件)。DeepSeek-V4-Flash 骨干上 SWE-Bench-Verified 73.40→76.45、TerminalBench 2.0 47.57→52.43,演化 harness 可跨基座迁移。本精读覆盖三大缺陷的诊断逻辑与对比式信用分配的因果推断本质。