实验复现建议
第四章:高层规划器检索实验
- 准备法条知识库,格式见
docs/data_format.md。
- 使用条文级分块构建索引。
- 运行检索,保存 TopK 结果。
- 根据标注法条计算 Recall@5、Recall@10、Hit@5、MRR、Accuracy。
- 消融:去除语义增强、去除诉求分解、去除满足性检验。
第五章:LoRA 仲裁意见生成实验
- 从案卷中抽取申请人诉求、庭审笔录、案件事实、仲裁意见。
- 转换为指令微调数据。
- 使用 Baichuan / Qwen 等基座模型运行 LoRA 微调。
- 计算 BLEU-4、ROUGE-1/2/L、PPL。
第六章:推理增强实验
- 对参照法律构造法律四元组和推理路径。
- 对比
w/o Path 与 w/ Path。
- 构建仲裁意见生成与仲裁结果生成混合训练集。
- 使用任务类别均衡和难度均衡采样进行多任务联合微调。