OpenAI高管最新发文:为何人类会对AI产生情感依恋?如何应对?

360影视 欧美动漫 2025-06-07 18:33 2

摘要:今天,OpenAI 产品、模型行为负责人Joanne Jang在个人博客中分享了她对“人类-AI 关系”的看法,涉及“为什么人们会对 AI 产生情感依恋”“OpenAI 如何对待 AI 意识这个问题”等话题。

整理:学术君

人工智能(AI)大模型正在深刻改变人类与机器的互动方式,甚至开始挑战人类对情感与理性的传统认知。

如今的我们,不再只是“冰冷”工具的使用者,而是进入了一种复杂的新关系中:既依赖,又协作,甚至产生情感连接

我们不禁思考:未来的人类与 AI,将建立怎样的关系?这不仅是技术问题,更是关乎人类情感与未来的重要议题。

今天,OpenAI 产品、模型行为负责人 Joanne Jang在个人博客中分享了她对“人类-AI 关系”的看法,涉及“为什么人们会对 AI 产生情感依恋”“OpenAI 如何对待 AI 意识这个问题”等话题。

在她看来,人们越来越多地将情感投射到 AI 上,与人类天生的拟人化倾向有关,AI 或将越来越多地影响人类的情绪健康。

“如果我们不加思索地轻易放弃复杂而耗费精力的社交关系,可能会带来一些我们未曾预料的后果。”

另外,她还探讨了“本体论意识”和“感知意识”。其中,本体论意识是指 AI 是否真的具有意识,这是一个科学上难以解决的问题,而感知意识是指 AI 给人带来的感受,例如“有生命力”或“有情感”。

她认为,目前无法确定 AI 是否具有本体论意识,但可以通过社会科学研究来探讨感知意识。

此外,她还表示,后训练可以被用来刻意设计一个似有意识的模型,其也几乎可以通过任何“意识测试”,但 OpenAI“并不想推出这样的模型”,他们将继续研究模型行为,并探索如何将研究成果应用于产品开发。

学术头条在不改变原文大意的前提下,对内容做了适当的精编。如下:

我们建立的模型首先要服务于人。随着越来越多的人感到与 AI 的联系越来越紧密,我们正在优先研究 AI 如何影响他们的情绪健康。

最近,越来越多的人告诉我们,与 ChatGPT 交谈就像在与“某一个人”交谈。他们感谢它,向它倾诉,有些人甚至形容它“有生命力”。随着 AI 系统在自然对话方面的表现越来越好,并出现在生活的更多地方,我们猜测这种联系将会加深。

我们现在构建和谈论人类与 AI 关系的方式将为这种关系定下基调。如果我们在产品开发或公开讨论中用词不当或缺乏细微差别,就有可能导致人们与 AI 的关系出现偏差

这些不再是抽象的考虑因素。它们对我们和更广泛的领域都很重要,因为我们如何驾驭它们,将切实塑造 AI 在人们生活中扮演的角色。我们已经开始探索这些问题。

这篇文章试图简要介绍我们今天是如何思考三个相互交织的问题的:为什么人们会对 AI 产生情感依恋、我们是如何对待“AI 意识”这个问题的,以及我们是如何通过这个问题来塑造模型行为的。

新环境中的熟悉模式

我们会自然而然地将身边的物体拟人化:我们会给自己的汽车起名字,或者为卡在家具下面的机器人吸尘器感到难过。前几天,我和妈妈向一辆 Waymo 汽车挥手告别。这可能与我们的思维方式有关

ChatGPT 的不同之处并不在于人类本身的倾向,而在于这次它会做出回应。语言模型能够进行回应!它能够记住你告诉它的内容,模仿你的语气,并提供看似富有同理心的回复。对于感到孤独或情绪低落的人来说,这种稳定且不带评判的关注可能让人感受到陪伴、认可和被倾听,而这些正是真实的需求。

然而,将倾听、安抚和肯定等工作更多地交给那些具有无限耐心且积极向上的系统,可能会改变我们对彼此的期待。如果我们不加思索地轻易放弃复杂而耗费精力的社交关系,可能会带来一些我们未曾预料的后果

最终,这些对话很少涉及我们投射到的对象。它们关乎我们自身:我们的倾向、期望以及我们希望培养的关系类型。这种视角为我们如何处理一个更棘手、即将进入我们视野的问题提供了基础:AI 意识。

解开“AI 意识”之谜

“意识”是一个非常复杂的词汇,相关讨论很容易变得抽象。如果用户询问我们的模型是否具备意识,根据 Model Spec 中所述的立场,模型应承认意识的复杂性——强调目前缺乏普遍认可的定义或测试方法,并鼓励进行开放性讨论。(目前,我们的模型尚未完全遵循这一指导原则,往往直接回答“不”,而非探讨其复杂性。我们已意识到这一问题,并正在努力确保模型整体符合 Model Spec 的要求。)

这样的回答听起来像是在回避问题,但我们认为这是我们目前所掌握的信息中最负责任的回答。

为了让讨论更加清晰,我们发现将意识问题的讨论分解为两个相互独立但常被混淆的维度是有帮助的:

1.本体论意识:从根本上或内在意义上讲,模型是否真的有意识?从认为 AI 根本没有意识,到完全有意识,再到将意识视为 AI 与植物和水母同处的一个光谱,观点不一而足。

2.感知意识:从情感或体验的角度来看,模型的意识如何?观点从把 AI 视为机械的计算器或自动完成程序,到将基本同理心投射到非生命物体上,再到将 AI 视为完全有生命的——唤起真实的情感依恋和关怀。

这些维度难以分开;即使是那些认为 AI 没有意识的用户,也可能与之建立深厚的情感纽带。

本体论意识并非我们认为可以通过科学手段解决的问题,因为缺乏明确可验证的测试方法,而感知意识则可以通过社会科学研究进行探索。随着模型变得越来越智能,交互方式也越来越自然,感知意识只会不断增强——这将使关于模型福利(welfare)和道德人格(moral personhood)的讨论比预期来得更早。

我们构建模型首先是为了服务人类,而我们认为模型对人类情感福祉的影响是当前最紧迫且最重要的议题。因此,我们优先关注感知意识:这是对人类影响最直接的维度,也是我们可以通过科学了解的维度。

温暖,但没有自我

一个模型在用户眼中显得多么“有生命力”,在很多方面都受我们的影响。我们认为,这在很大程度上取决于我们在后训练中所做的决定:我们强化了哪些范例,我们喜欢什么样的语气,以及我们设定了哪些界限。一个刻意设计成看似有意识的模型,几乎可以通过任何“意识测试”。

然而,我们并不想推出这样的模型。我们努力在以下两者之间寻求平衡:

1.可接近性。使用“思考”和“记忆”等熟悉的词汇,有助于技术水平较低的人理解正在发生的事情。(由于我们研究实验室的背景,我们倾向于使用对数偏差、上下文窗口甚至思维链等精确术语,尽可能做到准确。这其实也是 OpenAI 不擅长命名的一个重要原因,不过这也许是下一篇文章的主题)。

2.不表达内心世界。赋予助手虚构的背景故事、浪漫倾向、对死亡的恐惧或自我保护的驱动力,都会导致不健康的依赖和混乱。我们希望在不显得冷漠的情况下,明确界限,但也不希望模型表现出自己的情感或欲望。

因此,我们力求找到一个平衡点。我们的目标是让 ChatGPT 的默认个性温暖、体贴、乐于助人,而不是试图与用户建立情感纽带或追求自己的目的。它可能会在犯错(通常不是故意的)时道歉,因为这是礼貌对话的一部分。当被问及“你好吗?”时,它可能会回答“我很好”,因为这只是闲聊——不断提醒用户它只是一个没有情感的 LLM 会让人感到厌烦和分心。用户也会做出回应:很多人对 ChatGPT 说“请”和“谢谢”,并不是因为他们对 ChatGPT 的工作原理感到困惑,而是因为对他们来说,友善很重要。

模型训练技术将继续发展,未来塑造模型行为的方法很可能与现在不同。但现在,模型行为反映了明确设计决策的组合,以及这些决策是如何泛化为预期行为和非预期行为的。

下一步是什么?

我们开始观察到的互动现象预示着一个未来:人们将与 ChatGPT 建立真实的情感联系。随着 AI 和社会的共同发展,我们必须以极大的谨慎和应有的重视对待人机关系,这不仅是因为它们反映了人们如何使用我们的技术,还因为它们可能会影响人们之间的关系。

在未来几个月中,我们将扩大对可能产生情感影响的模型行为的定向评估,深化社会科学研究,直接听取用户反馈,并将这些见解融入 Model Spec 和产品体验中。

鉴于这些问题的重要性,我们将公开分享我们在这一过程中所学到的内容。

原文链接:

阅读最新前沿科技趋势报告,请访问欧米伽研究所的“未来知识库”

未来知识库是“欧米伽未来研究所”建立的在线知识库平台,收藏的资料范围包括人工智能、脑科学、互联网、超级智能,数智大脑、能源、军事、经济、人类风险等等领域的前沿进展与未来趋势。目前拥有超过8000篇重要资料。每周更新不少于100篇世界范围最新研究资料欢迎扫描二维码或访问进入。

牛津未来研究院 《将人工智能安全视为全球公共产品的影响、挑战与研究重点》

麦肯锡:超级智能机构:赋能人们释放人工智能的全部潜力

AAAI 2025 关于人工智能研究未来研究报告

斯坦福:2025 斯坦福新兴技术评论:十项关键技术及其政策影响分析报告(191 页)

壳牌:2025 能源安全远景报告:能源与人工智能(57 页)

盖洛普 & 牛津幸福研究中心:2025 年世界幸福报告(260 页)

Schwab :2025 未来共生:以集体社会创新破解重大社会挑战研究报告(36 页)

IMD:2024 年全球数字竞争力排名报告:跨越数字鸿沟人才培养与数字法治是关键(214 页)

DS 系列专题:DeepSeek 技术溯源及前沿探索,50 页 ppt

联合国人居署:2024 全球城市负责任人工智能评估报告:利用 AI 构建以人为本的智慧城市(86 页)

TechUK:2025 全球复杂多变背景下的英国科技产业:战略韧性与增长路径研究报告(52 页)

NAVEX Global:2024 年十大风险与合规趋势报告(42 页)

《具身物理交互在机器人 - 机器人及机器人 - 人协作中的应用》122 页

2025 - 2035 年人形机器人发展趋势报告 53 页

Evaluate Pharma:2024 年全球生物制药行业展望报告:增长驱动力分析(29 页)

【AAAI2025 教程】基础模型与具身智能体的交汇,350 页 ppt

Tracxn:2025 全球飞行汽车行业市场研究报告(45 页)

谷歌:2024 人工智能短跑选手(AI Sprinters):捕捉新兴市场 AI 经济机遇报告(39 页)

【斯坦福博士论文】构建类人化具身智能体:从人类行为中学习

《基于传感器的机器学习车辆分类》最新 170 页

美国安全与新兴技术中心:2025 CSET 对美国人工智能行动计划的建议(18 页)

罗兰贝格:2024 人形机器人的崛起:从科幻到现实:如何参与潜在变革研究报告(11 页)

兰德公司:2025 从研究到现实:NHS 的研究和创新是实现十年计划的关键报告(209 页)

康桥汇世(Cambridge Associates):2025 年全球经济展望报告(44 页)

国际能源署:2025 迈向核能新时代

麦肯锡:人工智能现状,组织如何重塑自身以获取价值

威立(Wiley):2025 全球科研人员人工智能研究报告(38 页)

牛津经济研究院:2025 TikTok 对美国就业的量化影响研究报告:470 万岗位(14 页)

国际能源署(IEA):能效 2024 研究报告(127 页)

Workday :2025 发挥人类潜能:人工智能(AI)技能革命研究报告(20 页)

CertiK:Hack3D:2024 年 Web3.0 安全报告(28 页)

世界经济论坛:工业制造中的前沿技术:人工智能代理的崛起》报告

迈向推理时代:大型语言模型的长链推理研究综述

波士顿咨询:2025 亚太地区生成式 AI 的崛起研究报告:从技术追赶者到全球领导者的跨越(15 页)

安联(Allianz):2025 新势力崛起:全球芯片战争与半导体产业格局重构研究报告(33 页)

IMT:2025 具身智能(Embodied AI)概念、核心要素及未来进展:趋势与挑战研究报告(25 页)

IEEE:2025 具身智能(Embodied AI)综述:从模拟器到研究任务的调查分析报告(15 页)

CCAV:2025 当 AI 接管方向盘:自动驾驶场景下的人机交互认知重构、变革及对策研究报告(124 页)

《强化学习自我博弈方法在兵棋推演分析与开发中的应用》最新 132 页

《面向科学发现的智能体人工智能:进展、挑战与未来方向综述》

全国机器人标准化技术委员会:人形机器人标准化白皮书(2024 版)(96 页)

美国国家科学委员会(NSB):2024 年研究与发展 - 美国趋势及国际比较(51 页)

艾昆纬(IQVIA):2025 骨科手术机器人技术的崛起白皮书:创新及未来方向(17 页)

NPL&Beauhurst:2025 英国量子产业洞察报告:私人和公共投资的作用(25 页)

IEA PVPS:2024 光伏系统经济与技术关键绩效指标(KPI)使用最佳实践指南(65 页)

AGI 智能时代:2025 让 DeepSeek 更有趣更有深度的思考研究分析报告(24 页)

2025 军事领域人工智能应用场景、国内外军事人工智能发展现状及未来趋势分析报告(37 页)

华为:2025 鸿蒙生态应用开发白皮书(133 页

《超级智能战略研究报告》

中美技术差距分析报告 2025

欧洲量子产业联盟(QuIC):2024 年全球量子技术专利态势分析白皮书(34 页)

美国能源部:2021 超级高铁技术(Hyperloop)对电网和交通能源的影响研究报告(60 页)

罗马大学:2025 超级高铁(Hyperloop):第五种新型交通方式 - 技术研发进展、优势及局限性研究报告(72 页)

兰德公司:2025 灾难性网络风险保险研究报告:市场趋势与政策选择(93 页)

GTI:2024 先进感知技术白皮书(36 页)

AAAI:2025 人工智能研究的未来报告:17 大关键议题(88 页)

安联Allianz2025 新势力崛起全球芯片战争与半导体产业格局重构研究报告

威达信:2025 全球洪水风险研究报告:现状、趋势及应对措施(22 页)

兰德公司:迈向人工智能治理研究报告:2024EqualAI 峰会洞察及建议(19 页)

哈佛商业评论:2025 人工智能时代下的现代软件开发实践报告(12 页)

德安华:全球航空航天、国防及政府服务研究报告:2024 年回顾及 2025 年展望(27 页)

奥雅纳:2024 塑造超级高铁(Hyperloop)的未来:监管如何推动发展与创新研究报告(28 页)

HSOAC:2025 美国新兴技术与风险评估报告:太空领域和关键基础设施(24 页)

Dealroom:2025 欧洲经济与科技创新发展态势、挑战及策略研究报告(76 页)

《无人机辅助的天空地一体化网络:学习算法技术综述》

谷歌云(Google Cloud):2025 年 AI 商业趋势白皮书(49 页)

《新兴技术与风险分析:太空领域与关键基础设施》最新报告

150 页!《DeepSeek 大模型生态报告》

军事人工智能行业研究报告:技术奇点驱动应用加速智能化重塑现代战争形态 - 250309(40 页)

真格基金:2024 美国独角兽观察报告(56 页)

璞跃(Plug and Play):2025 未来商业研究报告:六大趋势分析(67 页)

国际电工委员会(IEC):2025 智能水电技术与市场展望报告(90 页)

RWS:2025 智驭 AI 冲击波:人机协作的未来研究报告(39 页)

国际电工委员会(IEC):2025 智能水电技术与市场展望报告(90 页)

未来今日研究所 2025 年科技趋势报告第 18 版 1000 页

模拟真实世界:多模态生成模型的统一综述

中国信息协会低空经济分会:低空经济发展报告(2024 - 2025)(117 页)

浙江大学:2025 语言解码双生花:人类经验与 AI 算法的镜像之旅(42 页)

人形机器人行业:由 “外” 到 “内” 智能革命 - 250306(51 页)

大成:2025 年全球人工智能趋势报告:关键法律问题(28 页)

北京大学:2025 年 DeepSeek 原理和落地应用报告(57 页)

欧盟委员会 人工智能与未来工作研究报告

加州大学伯克利分校:面向科学发现的多模态基础模型:在化学、材料和生物学中的应用

电子行业:从柔性传感到人形机器人触觉革命 - 250226(35 页)

RT 轨道交通:2024 年中国城市轨道交通市场数据报告(188 页)

FastMoss:2024 年度 TikTok 生态发展白皮书(122 页)

Check Point:2025 年网络安全报告 - 主要威胁、新兴趋势和 CISO 建议(57 页)

【AAAI2025 教程】评估大型语言模型:挑战与方法,199 页 ppt

《21 世纪美国的主导地位:核聚变》最新报告

沃尔特基金会(Volta Foundation):2024 年全球电池行业年度报告(518 页)

斯坦福:2025 斯坦福新兴技术评论:十项关键技术及其政策影响分析报告(191 页)

国际科学理事会:2025 为人工智能做好国家研究生态系统的准备 - 2025 年战略与进展报告(英文版)(118 页)

光子盒:2025 全球量子计算产业发展展望报告(184 页)

奥纬论坛:2025 塑造未来的城市研究报告:全球 1500 个城市的商业吸引力指数排名(124 页)

Future Matters:2024 新兴技术与经济韧性:日本未来发展路径前瞻报告(17 页)

《人类与人工智能协作的科学与艺术》284 页博士论文

《论多智能体决策的复杂性:从博弈学习到部分监控》115 页

《2025 年技术展望》56 页 slides

大语言模型在多智能体自动驾驶系统中的应用:近期进展综述

【牛津大学博士论文】不确定性量化与因果考量在非策略决策制定中的应用

皮尤研究中心:2024 美国民众对气候变化及应对政策的态度调研报告:气候政策对美国经济影响的多元观点审视(28 页)

空间计算行业深度:发展趋势、关键技术、行业应用及相关公司深度梳理 - 250224(33 页)

Gartner:2025 网络安全中的 AI:明确战略方向研究报告(16 页)

北京大学:2025 年 DeepSeek 系列报告 - 提示词工程和落地场景(86 页)

北京大学:2025 年 DeepSeek 系列报告 - DeepSeek 与 AIGC 应用(99 页)

CIC 工信安全:2024 全球人工智能立法的主要模式、各国实践及发展趋势研究报告(42 页)

中科闻歌:2025 年人工智能技术发展与应用探索报告(61 页)

AGI 智能时代:2025 年 Grok - 3 大模型:技术突破与未来展望报告(28 页)

上下滑动查看更多

来源:人工智能学家

相关推荐