[Bug] gsm8k_gen_17d0dc-BOT思考提示语错误

[TBoyBack]

先决条件

• 我已经搜索过 问题 和 讨论 但未得到预期的帮助。
• 错误在 最新版本 中尚未被修复。

问题类型

我正在使用官方支持的任务/模型/数据集进行评估。

环境

python run.py conf/eval.py

重现问题 - 代码/配置示例

#conf/eval.py

from mmengine.config import read_base

with read_base():
from .datasets.gsm8k_base_gen import gsm8k_datasets

#conf/datasets/gsm8k_base_gen
from mmengine import read_base

with read_base():
from opencompass.configs.datasets.gsm8k.gsm8k_gen_17d0dc import gsm8k_datasets

重现问题 - 命令或脚本

gsm8k_gen_17d0dc 的line15的BOT思考有错
His team also scores 6 3 pointers, meaning they scored 83= 24 points in 3 pointers\n
应该是
His team also scores 8 3 pointers, meaning they scored 83= 24 points in 3 pointers\n

重现问题 - 错误信息

4 shots 提示 有错误

其他信息

可能是编写错误

[tonysy]

Thanks, we will fix this error.

[tonysy]

@liushz Please check this error and update the configuration.