Questions

[Tomsawyerhu]

几个问题

1. 从代码生成文档，比直接理解代码还多了一步，为什么会更好？
2. 补丁验证怎么做的，难道只生成一个补丁？还是人工验证的
3. 模型用的什么，结果里应该说明？看起来是Deepseek,但是人家GPT4，Claude才三十出头，还是加了补丁验证的，这个为什么能这么高？
4. 全部结果在哪里？

[ZhongQiangDev]

非常感谢您对RepoRepair工作的关注以及提出的深刻问题，我们对回复延迟表示诚挚歉意。以下是对你所提问题的逐项说明：

1. 确实，文档生成增加了额外步骤，但我们发现该步骤可以降低输入噪声与长度：直接输入项目的大量代码会引入冗余信息，而文档作为代码的“摘要”，在保证关键语义不丢失的前提下，显著缩短输入长度，提升定位的推理效率与准确性。

2. RepoRepair在实验中采用全自动补丁验证与迭代生成策略，具体流程如下：

• 初始生成：首先使用温度参数0生成确定性补丁，确保最高质量的初始输出
• 测试验证：将生成的补丁应用于代码库，并执行项目中原有的测试套件
• 迭代优化：如果补丁未通过测试，系统会以0.1为步长逐步提高温度参数（最高至0.9），重新生成补丁
• 终止条件：一旦补丁通过所有测试且不引发回归错误，即作为最终提交补丁；若温度达到0.9仍无法生成有效补丁，则视为修复失败
  整个流程完全自动化，无人为干预，确保评估的客观性和可复现性

3. RepoRepair使用的模型为：DeepSeek-V3（用于代码文档生成）；Claude-3.5-Sonnet以及最近使用Claude-4-Sonnet（用于定位与修复阶段）

4. 在SWE-bench-Lite和SWE-bench-Multimodal数据集的定位结果在这个仓库的repo_file_rag、buggy_files、buggy_elements开头的文件夹中，提交SWE-bench-Multimodal榜单的修复结果在该PR（Add new submission for SWE-bench Multimodal evaluation 20251012_RepoRepair_claude-sonnet-4-20250514 SWE-bench/experiments#346 ）中，如果想要全部生成的补丁，可以邮件联系分享