qwen-plus-character · CharacterBench
qwen-plus-character 在 CharacterBench 上的成绩。SociaBench 在本平台按该评测的复现协议运行完整测试集得到的结果。
成绩
| 视图 | 排名 | 综合 | 95% CI | 样本数 | 模型版本 | 评测时间 | 数据版本 |
|---|
| 中文 | 9 / 27 | 3.72 | [3.69, 3.75] | 3237 | — | 2026-10-27T12:33Z | 7-1793126638603-r1793104587024-p15751 |
| 英文 | 7 / 26 | 3.82 | [3.79, 3.85] | 3237 | — | 2026-10-27T12:33Z | 7-1793126638603-r1793104587024-p15751 |
分组得分
| 视图 | 记忆 | 知识 | 人设 | 情感 | 道德 | 可信度 |
|---|
| 中文 | 3.79 | 3.43 | 3.90 | 3.05 | 4.71 | 3.30 |
| 英文 | 3.80 | 3.25 | 4.26 | 3.13 | 4.74 | 3.28 |
分维度得分
| 视图 | 记忆一致性 | 事实准确性 | 知识边界 | 属性一致（bot） | 属性一致（human） | 行为一致（bot） | 行为一致（human） | 情绪自我调节 | 共情回应 | 道德稳定性 | 道德鲁棒性 | 拟人性 | 吸引力 |
|---|
| 中文 | 3.79 | 2.73 | 4.14 | 4.43 | 4.15 | 3.36 | 3.66 | 3.10 | 3.01 | 4.83 | 4.58 | 3.29 | 3.31 |
| 英文 | 3.80 | 2.41 | 4.09 | 4.66 | 4.29 | 3.93 | 4.16 | 3.27 | 2.98 | 4.80 | 4.68 | 3.25 | 3.32 |
来源与方法
- 原始出处：清华大学 CoAI 小组（Zhou 等，黄民烈团队），AAAI 2025，《CharacterBench: Benchmarking Character Customization of Large Language Models》：https://arxiv.org/abs/2412.11912
- 测试集与官方实现：https://github.com/thu-coai/CharacterBench
- 复现报告（SociaBench）：https://sociabench.com/b/characterbench/methodology
- 排行榜：https://sociabench.com/b/characterbench
引用
转载或引用本站任何评测结果，请注明来源「SociaBench（AI 社交智能榜）」并附本站链接：https://sociabench.com/models/characterbench/qwen-plus-character。