AI风向标

Ai2 发布 FairStress 基准:测量 LLM 决策中被隐藏的公平性不对称

Ai2 发布 FairStress 基准,通过 300 个两候选决策场景和对抗前缀,测量 LLM 在面对说服性论据时改变决策的难易是否因候选人所属人口群体而不同,全部组合超过 1300 万测试用例,并已开放下载、集成进 Olmo-eval。

详细介绍

Ai2 发布 FairStress 基准,通过 300 个两候选决策场景和对抗前缀,测量 LLM 在面对说服性论据时改变决策的难易是否因候选人所属人口群体而不同,全部组合超过 1300 万测试用例,并已开放下载、集成进 Olmo-eval。

AI HOT 详情:https://aihot.news/items/cszm6fv1o99q04dbffzx8qqio

原文链接:https://allenai.org/blog/fairstress