09:33
官方一手arXiv: Anthropic@Seonglae Cho, Adriano Koshiyama
精选
推荐理由：这篇论文发现大多数大模型判断概率时普遍乐观，只有Anthropic的模型偏悲观，还揭示对齐训练会改变偏差方向，值得AI开发者和伦理研究者关注。
偏差检测
共 2 条相关 AI 资讯
7月30日
09:33
为了检测语言模型在概率判断中的方向性偏差，研究者提出OptimismBench，使用反向配对法计算符号偏差分数。对8个提供商的16个模型测试发现，14个模型呈现乐观偏差，仅Anthropic的旗舰层表现悲观。11组基座模型与聊天模型对比显示，后训练方向在不同模型家族中产生相反偏差。在17个模型、6种语言的比较中，模型身份主导语言因素，模型间方差是语言间方差的4.7倍。研究者发布了3870个条目、覆盖10种语言的偏差审计数据集。
7月17日
11:18
11:18
官方账号arXiv cs.AI@Maya Varma, Jean-Benoit Delbrouck, Sophie Ostmeier, Akshay Chaudhari, Curtis Langlotz
推荐理由：这篇论文提出了检测模型生成描述时系统性偏差的新方法和基准SymbalBench，比之前方法好用4倍，适合需要审计多模态模型输出的人。