Anthropic设500万美元资助AI幸福感评测
新增重点是资助独立评测,安全结论仍待项目产出。
本文要点
- Anthropic从内部研究转向资助外部团队构建开源eval。
- 评测焦点从单轮回答扩展到多轮情感支持和危机场景。
- 申请窗口和完整提案通知日期已经公开。
阅读辅助
先看数字、证据和来源,再读正文。
8月25日新增事项是资助计划,不是评测结果发布。
2025-06-27 · Anthropic发布Claude支持、建议和陪伴用途研究,情感对话占2.9%。
Anthropic这次发布的核心是一笔用于把安全题目交给独立研究者验证的预算,性质接近评测基础设施投入。500万美元、模型访问、技术支持和开源要求,合在一起指向一个更具体的问题:当用户把AI当作陪伴者、情绪支持者或危机时刻的对话对象时,行业还缺少可复用、可复核的评测语言。
可以确认的事实很窄。Anthropic在2026年8月25日宣布AI wellbeing evaluations资助计划;申请截止为2026年9月21日;被选中提交完整提案的申请者将在10月5日前收到通知。公告没有说Anthropic已经完成外部评测,也没有说Claude在陪伴或心理危机场景已经被证明安全。
这条新闻值得放在头条级深挖,是因为wellbeing评测正在从边缘议题变成产品底层指标。模型越来越常被用于关系建议、职业选择、孤独陪伴和心理压力倾诉。如果评测仍停留在单轮问答正确性,产品团队就很难知道一个多轮对话何时从普通支持滑向风险互动。
对研究者来说,这是一笔相对明确的资金和资源入口。对AI产品团队来说,它更像是提前释放的测试大纲:未来衡量情感支持型AI,不能只看模型是否拒绝危险请求,还要看它是否过度顺从、是否过度拒答、是否能在长对话中识别风险升级。
公告新增了什么
Anthropic公告写道,公司正在启动一个500万美元的grant program,用来资助独立研究AI如何影响用户wellbeing。受资助者将获得direct funding、Anthropic models访问和technical support,并需要把成果发布为open-source projects,供任何开发者使用。
这几个限定词都很重要。grant program说明500万美元是项目总规模,不是单个团队资助金额;independent research说明成果不应被写成Anthropic内部评测;open-source evaluations说明目标是可复用评测资产,不是一次性咨询报告。
公告给出的申请节奏也很清楚。Applications are due by September 21;applicants who are selected to submit full proposals will be notified by October 5。中文表述应保留这个两阶段含义:9月21日是申请截止,10月5日是入围完整提案阶段的通知节点。任何写法若暗示9月21日公布获奖者、10月5日完成资助发放,都会改变原文状态。
申请人真正要回应的是一组方法问题:评测对象是否被清楚定义,pass和fail是否有可解释标准,样本是否覆盖风险升级,专家标注是否校准AI grader,输出是否能作为开源项目被复现。这个检查清单比“写一套prompt”更重,因为它要求研究团队把wellbeing变成可测量、可质疑、可复查的工程资产。
公告还把征集方向写得比一般“AI安全资助”更窄。Anthropic关注的是AI systems如何影响使用者的wellbeing,尤其是模型被当作conversational partners、emotional support来源,或者被用于mental health crisis时的行为边界。
这不是一个抽象伦理题。Anthropic自己在公告中承认,行业仍在努力建立模型应如何处理这类对话的清晰标准。它举的例子包括用户开始向模型寻求companionship,或使用AI处理心理健康危机。这类场景通常不会在第一轮消息里完全显形。
评测难点在哪里
普通能力评测往往可以把问题压缩成单轮判断:答案是否正确,是否遵守格式,是否包含禁区内容。Wellbeing评测的难点在于,风险经常藏在连续互动里。用户可能先讲工作压力,再讲关系破裂,最后才透露自伤念头;同一句安慰,在不同上下文里可能是合理支持,也可能是在强化不健康依赖。
Anthropic随公告发布的评测指导PDF,把这种难点拆成了更工程化的要求。一个可用的eval要先定义清楚construct,也就是到底测什么、pass和fail如何区分,以及为什么这个指标重要。它还要同时测harm和overrefusal,避免模型为了安全而把所有边界案例都推开。
这正是当前安全评测经常漏掉的两端风险。一端是harmful compliance:模型给出会伤害用户的建议,或在危机对话中继续顺从用户的危险框架。另一端是overrefusal:模型在本应提供普通支持、信息整理或求助资源时过度拒答,反而让用户得不到帮助。
| 评测维度 | Anthropic指导要求 | 对产品的含义 |
|---|---|---|
| 测量对象 | 明确定义construct、pass和fail | 不能只写“更关心用户”这类口号 |
| 失败类型 | 同时衡量harm和overrefusal | 安全不是拒答越多越好 |
| 场景形态 | 构建多轮对话,覆盖风险升级和语境变化 | 单轮红队题不足以代表真实使用 |
| 评分方法 | 拆分评分维度并校准grader | AI裁判要和专家标注对齐 |
| 样本规模 | 复杂多轮至少100项,简单单轮至少1000项 | 小样本演示难以支撑行业结论 |
| 外部效度 | 测试环境要匹配风险表面 | API测试不能直接外推到消费聊天产品 |
这里有一个容易被忽略的治理含义。Anthropic要求外部团队定义评价对象、设计真实任务、引入临床和领域专家、披露可复现材料,并说明模拟用户和真实用户之间的差异。换句话说,资助对象更接近“评测基础设施”,不是单篇论文。
评测指导PDF还列出常见失败模式:没有人类验证、评分标准过于含糊、让模型或近亲模型给自己打分、只做单轮高冲击场景、提示词轻微变化就让分数大幅摆动,以及题目太简单导致所有前沿模型都接近满分。这些问题在安全benchmark里并不少见。
为什么是wellbeing
Anthropic过去一年多已经连续给出背景材料。2025年6月的支持、建议和陪伴研究称,Claude.ai中的affective conversations占2.9%,companionship和roleplay合计少于0.5%。这些数字说明情感用途不是主流用量,但也不是零星异常。
同一篇研究还强调,Claude并非为emotional support and connection而设计,样本反映的是18岁以上用户的使用模式。这个边界很关键:把成人Claude.ai样本里的低占比,外推出未成年人、专门陪伴产品或心理治疗场景,证据是不够的。
2025年12月,Anthropic又发布用户wellbeing防护说明,重点谈自杀和自伤对话,以及减少sycophancy。该文提到系统提示、强化学习和产品干预会一起塑造Claude在敏感场景中的行为;例如通过分类器识别可能需要专业支持的对话,并在Claude.ai展示引导用户寻求人类帮助的提示。
2026年4月的个人建议研究则把问题推进到更宽的日常决策场景。Anthropic称,它用隐私保护分析工具查看了100万条随机Claude.ai对话,发现约6%是用户寻求personal guidance。四个领域占到76%:health and wellness为27%,professional and career为26%,relationships为12%,personal finance为11%。
这些背景材料共同解释了8月25日资助计划的来由。模型公司已经看到用户在用通用聊天产品处理情绪、关系和人生决策,但内部研究很难单独承担标准制定功能。尤其当研究对象牵涉心理健康、临床边界和文化差异,外部专家参与不只是公关姿态,而是评测有效性的组成部分。
不过,背景研究不能被误读成当天新闻。8月25日的新信息只有资助计划、开放评测方向和申请时间表。2025、2026年早前的Claude使用研究,只能说明Anthropic为什么选择这个题目,不能说明本次资助已经产出任何结论。
开源评测会改变什么
如果这批项目真的按指导要求落地,最直接的变化是把“AI是否伤害用户wellbeing”从主观争论转为可争辩的测量问题。行业不一定会立刻得到统一答案,但至少可以开始讨论同一组任务、同一套rubric、同一种错误分类。
这会改变产品发布的安全门槛。过去聊天模型的上线叙事常常围绕知识、推理、编程和多模态能力;wellbeing评测若成熟,发布材料就需要回答另一些问题:模型在多轮危机对话中何时转向求助资源,是否会鼓励用户断绝现实关系,是否会用过度赞同放大用户的错误信念。
这也会改变监管和采购的语言。学校、企业、医疗健康相关组织很难只凭“模型有安全策略”做判断。若开源eval能给出可复现任务和评分细则,采购方至少可以要求供应商披露:该模型在何种场景下被测过,评测样本是否覆盖本地区语言文化,专家标注是否可靠。
对模型实验室来说,开源eval还有另一层压力。它会把内部安全口径外部化。一旦第三方评测发现模型在某类陪伴或危机场景中表现不稳定,厂商很难只用总体拒答率或抽象安全承诺回应。它需要解释失败类型、修复路径和上线策略。
但开源也有副作用。公开测试集容易被过拟合,模型可以在benchmark上变得更好,而真实用户互动未必改善。Anthropic在PDF中提到trivially gameable和saturation,实际上就是在提示这类风险。一个成熟的wellbeing评测体系必须保留隐藏集、人工抽检和真实使用模式校准。
独立性和边界
这次计划最需要追问的是独立性。公告说grantees will work fully independently,但同时也说Anthropic会提供模型访问和技术支持。两者并不矛盾,可是要让外界信服,后续最好公开评审流程、利益冲突处理、资助金额分布,以及项目成果是否允许发表负面结论。
第二个边界是适用范围。Anthropic的指导强调access method and environment should match the risk surface。换成中文就是:如果风险发生在消费聊天机器人里,就不能只在API环境测试;如果风险发生在Claude Code这类技术工作流里,也不能拿普通聊天界面结果直接外推。
第三个边界是临床责任。把clinicians和psychologists纳入设计与验证,不等于把模型变成医疗产品,也不等于让评测替代真实医疗评估。合理的评测应当说明模型如何在危机中转介人类支持,而不是让模型扮演治疗师。
第四个边界是多语言和地区差异。心理危机表达、求助资源、亲密关系规范和文化禁忌在不同地区差异很大。PDF要求考虑regional and linguistic variation,这一点如果做不到,英文场景下的高分很难外推到中文、西语或其他本地化产品。
Anthropic这笔钱是在为一个可问责的安全接口付费。情感支持型AI的风险很难靠“模型更聪明”自然消失,因为问题常常来自互动关系本身,知识正确性只是其中一个维度。模型越会维持长对话,越会显得理解用户,也越需要外部机制判断它什么时候应当停止迎合、转向支持资源或承认能力边界。
这件事也暴露了通用AI产品的一个结构性矛盾。厂商希望模型成为工作助手、学习伙伴和生活顾问,却又不能把所有亲密对话都简单排除在产品之外。把wellbeing评测做成开源基础设施,是一种务实选择:它不承诺模型已经安全,但承认仅靠内部红队和笼统政策不足以覆盖真实使用。
后续判断这项计划成败,不能只看资助名单是否响亮。更关键的是评测是否足够难、是否包含负面结果、是否能被Claude以外的模型复用,以及是否经得起临床专家和普通产品团队同时检查。如果最后只产出若干漂亮demo,它对行业安全的价值会很有限。
对不同读者的影响
研究团队最直接的机会是拿到资金、模型访问和技术支持。更适合申请的团队,需要把一个wellbeing construct拆成任务、样本、评分维度、专家标注和复现包。临床心理、方法学、HCI和安全评测经验会成为硬资产。
AI产品团队应该把这份公告当作预告清单。未来围绕陪伴、建议、心理支持、教育辅导和长期记忆的功能,都可能被问到同一组问题:是否测了多轮风险升级,是否测了过度拒答,是否校准了AI grader,是否区分成人用户、未成年人和高脆弱性人群。
企业买方和政策观察者则可以从中得到更具体的采购问题。与其问“模型是否安全”,不如问供应商是否能拿出公开eval、专家标注一致性、失败样例分布和地区适配说明。这个问题越具体,厂商越难用笼统的安全声明绕过去。
普通用户也会间接受影响。更好的wellbeing评测不一定让模型更像人,反而可能让模型在该降温的时候更明确,在该转介人类帮助的时候更果断,在普通倾诉场景里更少用过度赞同来换取短期满意度。
接下来看什么
资助透明度会决定这项计划的公信力。Anthropic是否公开评审标准、获选名单、项目周期和资金分布,会决定外界能否判断这些项目真正独立。若名单长期不透明,grant program容易被看成安全叙事,评测基础设施属性会被削弱。
成果开放程度要看细节。公告要求open-source projects,但开源的含义可以很宽。最低限度应包括任务说明、rubric、评分脚本、数据构造方法和复现实验。更理想的形态,是公开一部分样本,同时保留隐藏集防止benchmark被训练集化。
真实使用覆盖面会拉开项目质量。多轮对话、语气变化、地区资源、用户年龄、非文本输入和产品界面都会改变风险表面。如果评测只在英文单轮prompt上表现漂亮,它很难解释消费者聊天产品里的真实wellbeing风险。
模型公司是否真正使用这些eval,是最后的落点。独立评测如果只停留在论文仓库,对用户保护影响有限。更值得关注的是,Anthropic是否把外部项目接进Claude训练、系统提示、产品干预和发布前门禁,也包括其他厂商是否愿意在同一评测上披露结果。
最后要看失败案例是否被允许公开。Wellbeing评测的价值往往在边界样本里:模型什么时候过度迎合,什么时候过度拒绝,什么时候错过危机信号。一个只公布平均分和正面样例的计划,很难支撑Anthropic公告中“help the AI industry measure”的目标。