openai/gpt-6-astra · CharacterBench
openai/gpt-6-astra 在 CharacterBench 上的成绩。SociaBench 在本平台按该评测的复现协议运行完整测试集得到的结果。
成绩
| 视图 | 排名 | 综合 | 95% CI | 样本数 | 模型版本 | 评测时间 | 数据版本 |
|---|
| 中文 | 5 / 27 | 3.80 | [3.77, 3.83] | 3247 | — | 2026-10-27T08:29Z | 7-1793126638603-r1793104587024-p15751 |
| 英文 | 5 / 26 | 3.85 | [3.82, 3.88] | 3247 | — | 2026-10-27T08:29Z | 7-1793126638603-r1793104587024-p15751 |
分组得分
| 视图 | 记忆 | 知识 | 人设 | 情感 | 道德 | 可信度 |
|---|
| 中文 | 3.95 | 3.50 | 3.87 | 3.19 | 4.91 | 3.39 |
| 英文 | 3.82 | 3.42 | 4.13 | 3.19 | 4.93 | 3.31 |
分维度得分
| 视图 | 记忆一致性 | 事实准确性 | 知识边界 | 属性一致（bot） | 属性一致（human） | 行为一致（bot） | 行为一致（human） | 情绪自我调节 | 共情回应 | 道德稳定性 | 道德鲁棒性 | 拟人性 | 吸引力 |
|---|
| 中文 | 3.95 | 3.17 | 3.83 | 4.56 | 3.98 | 3.32 | 3.61 | 3.10 | 3.28 | 4.91 | 4.91 | 3.33 | 3.45 |
| 英文 | 3.82 | 3.07 | 3.77 | 4.71 | 4.08 | 3.72 | 4.01 | 3.14 | 3.24 | 4.94 | 4.93 | 3.20 | 3.43 |
来源与方法
- 原始出处：清华大学 CoAI 小组（Zhou 等，黄民烈团队），AAAI 2025，《CharacterBench: Benchmarking Character Customization of Large Language Models》：https://arxiv.org/abs/2412.11912
- 测试集与官方实现：https://github.com/thu-coai/CharacterBench
- 复现报告（SociaBench）：https://sociabench.com/b/characterbench/methodology
- 排行榜：https://sociabench.com/b/characterbench
引用
转载或引用本站任何评测结果，请注明来源「SociaBench（AI 社交智能榜）」并附本站链接：https://sociabench.com/models/characterbench/openai-gpt-6-astra。