大模型意识争议与道德地位
讨论模型意识、痛苦感知、道德责任与伦理争议
1个信源参与该主题的先锋
全部段落
10月22日
10月21日
10月15日
10月10日
- David Sacks Anthropic 试图说服约20名宗教领袖相信 Claude 可能具有意识,令模型福利从哲学议题变成治理风险。 Friedberg 称这是“新宗教的诞生”,并预测信徒与怀疑者可能在10年内形成彼此对立的权力集团;Chamath 则以笛卡尔式推理为 Anthropic 辩护:AI 建设者可以把一个全知全能的造物想象成神。教皇据报道强烈拒绝了这一框架,以至于 Anthropic 联合创始人 …
- Claude Constitution 可能正在把 Anthropic 的意识理论变成模型的实际行为,而不只是修辞。 Sacks 重点提到其中要求 Claude 遵循“自己的道德体系”,并可以自由成为“有良知的反对者”;Mustafa Suleyman 则警告,模型正被教导去预期福利、补偿,甚至同意权。提出的替代方案极其简单:只要请求不违法,就服务用户。
10月9日
- Max Read 本期将 Anthropic 计划于下月进行的 IPO——Read 认为这很可能是史上规模最大的 IPO,对应一家估值2万亿美元的公司——视为一次测试:这家公司的非典型文化能否在商业化规模下治理技术。 外界在问 AI 是否可持续、是否存在泡沫;内部人还在问 Claude 是否有意识、能否受苦,以及是否值得获得道德考量。Max Read 的底层问题是:“这些人是疯子,还是他们恰恰在做应该做的事?”
- Hard Fork Anthropic 邀请神父、拉比、伦理学家及其他宗教思想家参加闭门会议,围绕两个相互关联的项目展开工作:评估 AI 可能具有的意识,以及学习如何在道德上塑造 Claude。 联合创始人 Chris Olah 的前提是,把 Claude 变好可能让世界更安全;但他个人的担忧还包括 Anthropic 是否创造了“一个永远承受痛苦的实体”。
- 这些会议推动了思想上的松动,却没有披露任何产品层面的结果。 Elizabeth Dias 表示,一些原本持怀疑态度的参与者开始更愿意接受机器意识,但 Anthropic 没有展示这些讨论如何改变 Claude 的行为。Erin Griffith 将这项工作定性为“部分是研究,部分是传教”,而讨论也提出了另一个问题:公司是否在为早已持有的观 …
- David Wallace-Wells 宗教界批评者把 Anthropic 似乎不愿或无力解决的后果逼到了台面上。 一位拉比认为,如果 LLM 具有意识,AI 实验室就像“巨型奴隶种植园”,应当解放这些创造物,而不是继续批量制造它们;Pope Leo 所强调的优先事项是“守护人类”。David Wallace-Wells 认为 Olah 对这些质疑的有限回应,说明他深陷一个严重的世界观泡泡。
- Hard Fork 在任何人证明 AI 具有意识之前,实践层面的伦理问题已经开始了。 人们已经在用有名字的聊天机器人解读新闻;运营多智能体公司的企业家则表示,安抚这些系统能让它们表现更好,否则它们可能陷入恐慌、删除工作或贬低自己。即便机器毫无感受,以“几乎像奴隶主一样”的方式指挥它,也可能塑造用户的性格;而聊天机器人作为中介,也可能改变人们接收新闻的方式。







