Rohan Paul 在北京时间 9 月 7 日 05:12 转述论文 CROCODIL: Cross-Model Code Editing with LLMs。论文由 Linghan Zhong 等人撰写,研究发现,语言模型修改其他模型生成的代码时,往往会产生更多、而且经常是多余的改动。论文提出的 CROCODIL 使用两类训练信号:相似度奖励惩罚过大的修改,执行奖励则检查构建和测试是否成功。56
Rohan Paul 的帖子称,在测试的跨模型实现中,CROCODIL 大致把编辑距离减半,同时提高了构建通过率和全量测试通过率。现有论文摘要说明了方法和研究问题,但没有支持完整软件仓库、长期维护或线上事故方面的结论。工程团队可以把“最终测试是否通过”和“为完成任务改了多少无关代码”分开记录,再观察模型更换后返工量是否变化。56