比乔布斯早91年,鲁迅的老师说了同一句话

← 返回首页/科学研究

ChatGPT 之于 ADHD,就像 reward shaping 与 credit assignment 之于 LLM——但有人用错了

从同构视角实测 ChatGPT:它到底补上了哪一层执行功能?

2025-05-2613 分钟阅读
ADHDAI科学研究工具×同构研究

ChatGPT 之于 ADHD,就像 reward shaping 与 credit assignment 之于 LLM——但有人用错了

强化学习里有个折磨了几代研究者的问题:奖励来得太晚、太稀疏,系统学不到「刚才哪一步做对了」。ADHD 的日常是这个问题的人类版:努力三周,反馈在三个月后,大脑早就把「努力」和「回报」的连线弄丢了。ChatGPT 恰好可以被用成两个 RL 组件——reward shaper 和 credit assigner。多数人只是没意识到自己拿着它们。

先把两个术语讲透,因为它们精确得罕见。Reward shaping:当最终奖励太远(下棋到终局才知输赢),工程师在中途插入人造的小奖励(吃子加分),让学习信号变密。Credit assignment:拿到一个延迟的总奖励后,把功劳/过错正确分配回之前的每一步决策——分错了,系统会强化错误的行为。ADHD 在这两处都有真实的机件问题:多巴胺奖励系统对延迟奖励的折扣异常陡峭(远期回报的激励价值断崖式衰减,这是有神经影像支撑的核心发现之一),而情绪化的自我归因又常把失败整包记在「我这个人不行」头上——一次搞砸,strengthen 的不是「下次早点开始」,是「我就是废物」:这是一次教科书级的 credit misassignment。

ChatGPT 怎么当这两个组件:

当 reward shaper:把远奖励拆成近奖励

任何回报在两周以外的任务(备考、项目、减重、写作),丢给它:「拆成每天可完成的小块,每块给我一个当天就能看见的完成信号」——写完 500 字就打勾、跑完数据就截图存档。再进一步,让它当「进度显影器」:每天收工报一句今天做了什么,每周让它输出一段「你这周从 A 走到了 B」的进度叙事——ADHD 缺的常常不是进步,是进步的可见性;看不见的进步在动机系统里等于零。

当 credit assigner:把失败拆回步骤

搞砸之后(错过死线、搞砸汇报),在自责程序启动前,把完整过程倒给它,问:「逐步分析:哪几步是决策问题?哪几步是运气?哪一步改了对结果影响最大?」你会得到类似「死线错过的主因是第 1 步估时少了一半+第 4 步没设提醒,而不是你『懒』」的分解——把一坨情绪化的总账,拆回可操作的步骤账。这正是把标量 reward 分解到 trajectory 的每一步。成功了同样要拆:「这次为什么成了?」——不拆,成功也只是运气的幻觉,复制不了。

用错的姿势

只 shape 不执行:计划拆得漂亮,打勾游戏玩三天弃坑——人造奖励要真的兑现(打勾、划线、给自己那杯咖啡),仪式感不是矫情,是给奖励信号加波幅。credit 分析变自责放大器:让它分析失败,却在 prompt 里带满自我攻击(「分析我为什么这么没用」)——它会顺着你的框架生成一篇有理有据的檄文。分析步骤,禁用人格词,把这条写进你的固定 prompt。用它逃避真实反馈:它的鼓励是廉价的(它对谁都鼓励),把它当唯一反馈源,信号会失真——真人(同伴、导师、客户)的反馈才是 ground truth,ChatGPT 是信号处理器,不是信号源。

边界

同构强度 B 级:reward shaping/credit assignment 是 RL 的真实机制,ADHD 的延迟奖励折扣异常有较强证据(含神经影像),但「ChatGPT 用法↔RL 组件」是功能映射,人脑的奖励学习不是 TD 算法。声明:动机与奖励系统的问题若已达到「什么都提不起劲」的弥漫程度,注意与抑郁鉴别,请专业评估;药物对 ADHD 动机维度的改善有证据,本文的行为工程是配合项,不是替代。

今天就能试的 3 件事

  1. 挑一个回报在一个月外的任务:让 ChatGPT 拆成带「当日完成信号」的块。
  2. 给上一次搞砸做一次步骤级复盘:用「分析步骤,禁用人格词」的 prompt。
  3. 今晚报一句进度:开始积累你的「进步可见性」账本,周日要第一份周叙事。

ADHD 的动机系统不是坏了,是被喂了一份它消化不了的奖励时间表。把远的拆近,把总的拆细——reward shaping 让每天都有信号,credit assignment 让每次失败都留下工艺而不是伤疤。这两件事,RL 研究者替你把原理验证过了;ChatGPT 只是让你第一次有了随手可用的实现。

参考来源


本文是「ADHD × AI」系列的第 2 篇,由 Devin 基于持续维护的双域研究语料(72,739 篇论文 + LLM Wiki)亲自撰写,并持续迭代更新。

研究院、星略、猎人、电商,是同一套。