1. 程序运行pipeline

(1) 启动脚本

• command命令行传入参数介绍
• 数据导入和处理
• 超参数

(2) 编辑过程

• edit()函数简要介绍
• _prepare_requests()函数简要介绍
• edit_requests()函数简要介绍
• edit_func()函数简要介绍
• edit_evaluation()函数简要介绍
• 模型权重恢复部分

(3) 评测流程：teacher forcing类

• 如何使用这一类评估方法
• compute_edit_quality()函数
• compute_rewrite_or_rephrase_quality()函数
• compute_locality_quality()函数
• compute_portability_quality()函数
• test_generation_quality()函数

(4) 评测流程：LLM-as-a-judge类