Doubao-Seed-Character（260628） · CharacterEval
Doubao-Seed-Character 在 CharacterEval 上的成绩。SociaBench 在本平台按该评测当前的复现协议运行完整测试集得到的结果；排名只收这类结果。
成绩
| 视图 | 排名 | 角色一致性 | 95% CI | 样本数 | 模型版本 | 评测时间 | 数据版本 |
|---|
| 中文 | 1 / 5 | 3.595 | [3.574, 3.615] | 4531 | — | 2026-11-01T10:53Z | 5-1793543113034-r1793034246936-p6065 |
分组得分
| 视图 | 对话能力 | 角色一致性 | 扮演吸引力 | 人格回测 |
|---|
| 中文 | 4.116 | 3.595 | 3.891 | — |
分维度得分
| 视图 | 流畅度 | 连贯性 | 一致性 | 知识展现 | 知识准确 | 知识幻觉 | 人设行为 | 人设话语 | 拟人性 | 沟通技巧 | 表达多样 | 共情 | MBTI 准确率 |
|---|
| 中文 | 3.992 | 4.255 | 4.102 | 3.067 | 3.502 | 3.567 | 4.335 | 3.504 | 3.853 | 4.028 | 4.028 | 3.654 | — |
来源与方法
- 原始出处：中国人民大学高瓴人工智能学院（Tu、Fan、Tian、Yan），ACL 2024，《CharacterEval: A Chinese Benchmark for Role-Playing Conversational Agent Evaluation》：https://arxiv.org/abs/2401.01275
- 测试集与官方实现：https://github.com/morecry/CharacterEval
- 复现报告（SociaBench）：https://sociabench.com/b/charactereval/methodology
- 排行榜：https://sociabench.com/b/charactereval
引用
转载或引用本站任何评测结果，请注明来源「SociaBench（AI 社交智能榜）」并附本站链接：https://sociabench.com/models/charactereval/doubao-seed-character-260628。