推理过程验证过滤所使用的指标
质量评估
2.1.1. 召回率
首先经过step_partition步骤后,得到了带有N步推理的思维链。使用llm找到其中的关键
步骤,然后依次判断这些关键步骤解决的问题或陈述的事实是否在出现在真实答案中。将出现的个数除以总个数,
即可得到召回率分值。
首先经过step_partition步骤后,得到了带有N步推理的思维链。使用llm,以真实答案为… See the full description on the dataset page:
https://huggingface.co/datasets/krisfu/delicate_medical_r1_data_chinese.