AI 心理 · 公开方法研究样本
如何判断AI心理产品的研究证据与商业价值
AI心理产品“有论文”就值得采购吗?本研究对照治疗试验、服务转介、安全模拟和陪伴关系研究,说明每类证据能证明什么、不能推断什么。采购时还要核对研究与在售版本、人群和使用场景是否一致,并检查人工投入、真实成本与风险处置。文末附供应商核查清单,帮助读者把产品宣传变成可验证的问题。
先问产品究竟承诺改变什么
“AI心理产品有效”不是一个可检验的结论。治疗工具可能主张减轻症状;转介入口可能主张让更多人进入服务;陪伴产品可能主张缓解当下孤独;安全机制则主张降低特定风险。购买前先写下目标人群、使用情境、产品与模型版本、对照方式、主要结果和观察时长。若这六项无法对应到一篇研究,‘有论文’仍不足以证明当前售卖版本的当前主张。
证据强度取决于问题而非论文标签:随机试验更适合检验指定干预下的效果,运营观察更贴近真实流程却易受同时发生的服务变化影响,模拟审计能系统寻找失败模式而不能估计现实伤害发生率。四类研究不可用一个百分比排高低。
治疗试验:看对照、结局与适用范围
2025年发表的Therabot随机试验纳入210名有显著抑郁、焦虑症状或进食障碍高风险的成年人,分配至四周聊天机器人干预或候诊名单对照。它直接测试特定研究系统在特定人群和时间窗内的症状变化,比单臂用户满意度更能支撑治疗效果讨论。
但候诊对照不是面对面治疗、其他数字干预或等时长普通聊天。研究样本、纳入排除条件、专业监督、依从性及后续随访共同限定外推范围。采购者应要求主要结局的组间差异、失访与不良事件定义、预注册方案及已售版本与试验版本的对应表;不能从这项试验推断所有生成式聊天产品都可替代治疗师。
服务转介:入口改善不等于治疗获益
2024年Nature Medicine的英国NHS多站点观察研究评估AI自转介聊天工具,涉及129,400名患者。实施服务的转介量较基线增长15%,匹配对照服务增长6%。这提示数字入口可能改变求助可及性;它测的是服务流程,不是使用者症状改善,更不是算法独立贡献的随机试验估计。
采购价值要沿完整漏斗核算:合格转介、完成评估、进入适宜治疗、等待时间、人工复核负担、退出者及不同群体的可及性。NICE于2025年允许Limbic Access和Wysa Digital Referral Assistant在英国NHS特定条件下边生成证据边使用,同时明确仍需补齐临床决策、行政负担、时间和成本证据;这不是无条件常规采用,也不自动适用于其他国家。
安全模拟:把连续对话当作评测单位
2026年SIM-VAIL论文用30种模拟用户画像、9个目标聊天机器人进行810段多轮对话审计。研究观察到令人担忧的回应会随脆弱性、意图和对话轮次变化;一次得体回复不能保证随后仍安全。它给采购者的实用启发是要求版本固定、覆盖不同语言与场景的多轮测试,记录升级人工和事后纠偏是否有效。
这些对话由模型模拟并由自动评分器评价,虽有临床人员参与验证,仍不是现实用户不良事件率。论文还说明审计的是通过API访问的目标模型,不等同部署后带系统提示、界面和安全中间件的成品。因此要把模拟审计与真实事件报告、人工复核及更新后回归测试并列,不能拿审计分数宣布产品‘零风险’。
陪伴观察:短时安慰与长期关系分开看
2026年Psychological Science的四国成年人12个月纵向研究发现,更多社交聊天机器人使用可预测之后更高的单题情绪隔离感;较低社会连接感也可预测之后更多使用。作者强调分析具有探索性,不能据此断言使用造成孤独。其测量对象和结局也不同于治疗试验中的临床症状。
陪伴产品若强调价值,应分别呈现即时体验、持续使用、现实人际连接和长期福祉。高留存既可能表示得到帮助,也可能表示难以离开;需要预先约定何种结果算受益,何种依赖或社交替代信号触发复核。观察关联不能被改写成‘AI陪伴必然有害’,用户好评也不能替代长期追踪。
公司主张与商业价值:另开一张账
公司官网、销售材料或研究目录可以说明产品自称的用途、客户和功能,却不自动构成独立疗效证据。逐条建立‘原话—证据—产品版本—适用人群—利益关系’对应表;研究若由开发方参与或资助,应披露,不因此一概否定,也不把公司估算冒充独立测量。美国FTC的健康产品营销指导强调客观健康主张须有与主张相称的科学依据;它是美国营销指导,不是全球统一认证。
商业价值同样要指定买方与替代方案:机构可能为完成更多适宜评估、减少重复录入或提高服务可及性付费;消费者可能为便利和主观支持付费。合同金额、毛利、续约、转介转化与临床获益是不同指标。公开论文不能证明某公司当前收入或单位经济性;缺少可审计合同和成本数据时,只能提出待验证的采购假设。所谓‘节省时间’也要说明节省的是哪一岗位、哪一环节,是否把工作转移给其他人员。
买方判断:哪些新证据会改变结论
先按产品主张选择证据门槛,再看证据是否覆盖真实部署。治疗主张需要合适对照、预先指定的临床结局与更长随访;转介主张需要服务层面的匹配比较和后续治疗路径;安全主张需要模拟压力测试加真实世界事件机制;陪伴主张需要长期、多维福祉指标。WHO关于健康领域大模型的指导还提醒关注隐私、自主性、偏差和部署后审计。
会改变判断的证据包括:独立复现方向相反;产品升级后旧研究无法映射;获益只出现在高度筛选人群;失访者或弱势群体结果更差;真实部署的人工负担、风险事件或总成本超出预期。相反,预注册的多点复制、明确的版本对应、公开负面结果及可审计的成本与续约数据,会提高可信度。以下清单应在购买或发布健康主张之前索取,而不是事后补写。建议在试点前写明停止条件和复核负责人:出现预定义风险、关键群体掉队或成本超过上限时,暂停扩张并审查记录。续约时重新核对模型版本与用途,不把首年试点报告自动沿用为长期证明。
证据对照
同一问题内比较,不跨结局排名
下表按研究用途整理解释范围。治疗、转介、安全与陪伴的结果单位不同,不能把各自数字合成一个产品分数。
| 证据类别 | 研究单位与对照 | 可支持的判断 | 不能推出的结论 | 优先补证 |
|---|---|---|---|---|
| 治疗RCT | 个体随机;Therabot与候诊名单 | 特定研究系统在入组人群中的短期症状结局 | 优于治疗师、适用所有产品或长期有效 | 主动对照、长随访、版本映射与不良事件 |
| 转介运营观察 | NHS服务实施前后与匹配对照服务 | 转介量及可及性变化 | 转介者临床获益或算法单独因果效果 | 评估至治疗全漏斗、人工时间与成本 |
| 安全模拟审计 | 模拟用户与目标模型多轮交互 | 特定场景下的失败模式和回归测试方向 | 真实人群伤害率或成品零风险 | 部署版测试、事件监测与人工复核 |
| 陪伴纵向观察 | 成年人跨时点使用与孤独感测量 | 使用与后续情绪隔离感的关联 | 使用导致孤独或治疗效果 | 预注册复制、关系质量与长期福祉 |
采购核查
向供应商和研究团队提出的问题
- 产品到底主张改善症状、转介、体验、安全,还是服务成本?主要结局是否预先指定?
- 研究中的人群、语言、风险等级和使用场景,与计划采购的人群是否一致?
- 研究版模型、提示、安全层和人工监督,与当前交付版本如何逐项对应?
- 对照组是什么:候诊、现有流程、普通聊天、其他数字工具,还是标准治疗?
- 失访、负面结果、不良事件与弱势群体差异是否完整报告?
- 转介增加之后,有多少人完成评估、获得适宜治疗,等待和人工负担怎样变化?
- 多轮安全审计是否覆盖本地语言、模型更新和真实部署流程?事件如何上报及复核?
- 陪伴留存之外,是否测量现实社交、依赖迹象及长期福祉?
- 研究资助、作者与供应商关系、公司宣传原话及证据适用范围是否公开?
- 总拥有成本、培训与监督投入、合同续约和替代方案,是否有可审计而非宣传口径的数据?
原始依据
来源与核查范围
日期为来源实际发表或发布日;核查日是本样本检查链接与所引结论的日期。机构指导不替代具体产品研究。
- 随机对照试验原论文原文
Randomized Trial of a Generative AI Chatbot for Mental Health Treatment
美国成年人、研究版Therabot、四周干预与候诊名单对照;不证明其他产品或常规治疗替代效果
发布 2025-03-27 · 核查 2026-09-24 - 多站点服务观察研究原论文原文
Closing the accessibility gap to mental health treatment with a personalized self-referral chatbot
英国NHS Talking Therapies自转介量与群体可及性;不是症状疗效试验
发布 2024-02-05 · 核查 2026-09-24 - 模拟多轮安全审计原论文原文
A clinically validated framework for auditing AI chatbot behavior in mental health interactions
模拟画像和API目标模型的行为风险;不估计现实人群伤害发生率
发布 2026-08-07 · 核查 2026-09-24 - 成年人纵向观察研究原论文原文
How Does Turning to AI for Companionship Predict Loneliness and Vice Versa?
四国成年人社交聊天机器人使用与孤独感关联;探索性分析不支持因果断言
发布 2026-03-23 · 核查 2026-09-24 - 英国NICE官方早期价值评估指导原文
Digital front door technologies for NHS Talking Therapies: early value assessment, recommendations
有条件证据生成期使用与待补证据;非全球监管结论
发布 2025-07-24 · 核查 2026-09-24 - WHO官方治理指导发布原文
WHO releases AI ethics and governance guidance for large multi-modal models
健康领域大模型治理原则;不是具体AI心理产品效果试验
发布 2024-01-18 · 核查 2026-09-24 - 美国FTC官方健康产品营销指导原文
Health Products Compliance Guidance
美国健康相关广告主张的证据原则;不构成其他法域法律意见
发布 2022-12-20 · 核查 2026-09-24
编辑说明
方法与边界
作者:BlisseMind Insight 编辑部。本样本依据上列公开原始论文和官方机构资料撰写,未开展原创访谈、产品实测、临床复现或私有客户分析。公司披露的用途与经营数据须另行核对;本文不对具体产品作购买、治疗或投资推荐。研究更新与更正应以来源、版本和日期为依据。
