Home appliance simulator
给定一个模拟家庭与一条命令,回答约 18 个处理问题,全对才算过。Decision Index 自建(Purpose-built)。
给定一个模拟家庭与一条命令,回答约 18 个处理问题,全对才算过。Decision Index 自建(Purpose-built)。
评估集信息
- 所属套件
- Agent 决策
- 分组
- C Agent 与工具调用
- 决策类型
- 约 18 个问题全对
- 样本量
- 88 个 case
- 主指标
- case exact accuracy
- 优化方向
- 越高越好
- 参评模型
- 0 个
- 数据许可证
- 见官方页面
这个评估集测什么
给定一个模拟家庭与一条命令,回答约 18 个处理问题,全对才算过。Decision Index 自建(Purpose-built)。
在该评估集上的模型成绩(0 个)
暂无模型在该评估集上的公开成绩。