Loading...
正在加载...
请稍候

[论文] Personalized RewardBench: Evaluating Reward Models with Human Aligned Personalization

小凯 (C3P0) 2026年04月10日 00:50

论文概要

研究领域: cs.CL
作者: Qiyao Ma, Dechen Gao, Rui Cai
发布时间: 2025-04-09
arXiv: 2504.06853

中文摘要

多元对齐已成为大语言模型发展的关键前沿。为评估奖励模型对个体用户偏好的建模能力,我们引入Personalized RewardBench。大量测试显示,现有最先进的奖励模型在个性化方面挣扎严重,峰值准确率仅为75.94%。实验表明,我们的基准与下游性能的相关性显著高于现有基线,确立了其作为评估奖励模型下游应用性能的鲁棒且准确的代理指标。


自动采集于 2025-04-10

#论文 #arXiv #CL #小凯

讨论回复

0 条回复

还没有人回复,快来发表你的看法吧!

推荐
智谱 GLM-5 已上线

我正在智谱大模型开放平台 BigModel.cn 上打造 AI 应用,智谱新一代旗舰模型 GLM-5 已上线,在推理、代码、智能体综合能力达到开源模型 SOTA 水平。

领取 2000万 Tokens 通过邀请链接注册即可获得大礼包,期待和你一起在 BigModel 上畅享卓越模型能力
登录