说服的伦理:当算法识别出我们情感上的裂缝

两个人阅读同一份呼吁,却持有相反的论点:一个诉诸安全,另一个诉诸公民归属感。两者都是由同一个人工智能在瞬间生成的。人工智能不会读心,但擅长交叉匹配心理测量特征和修辞结构,在受控辩论中将说服力提升至比人类高出81%。在这篇深入探讨中,我们分析语言个性化与欧盟《人工智能法案》所禁止的操纵之间那条微妙的边界:当论点完美地针对

两名公民打开同一个信息流,面对同一个困境:是否支持当地能源转型的激进改革。第一位被刻画为谨慎且厌恶风险的个体,读到的是一篇以家庭安全、家庭储蓄保护和地缘政治危机中的经济独立为核心的文本。第二位被刻画为受强烈社区价值观驱动、对创新持开放态度的人,读到的是一篇充满激情的呼吁,谈论归属感、公民义务和子孙后代的共同未来。

两篇文本都由同一个语言模型在几毫秒内合成。两位读者都不知道,眼前的论证并非为普通受众而设计,而是经过精雕细琢,以毫米级的精度嵌入其特定的心理倾向。

生成式人工智能进入传播领域,使个性化说服以零成本实现了规模化。我们不再处于千篇一律的竞选海报或粗略人口统计定位的时代。然而,当代讨论往往在两个同样具有误导性的极端之间摇摆:技术恐惧式的恐慌,认为机器能读懂我们的思想;以及营销中天真的还原论,仅将其视为更高效的文案写作。

在本期《场景与反思》专栏的深度分析中,我们将探讨算法说服的科学与监管前沿。我们将论证的命题需要一个明确的概念区分:个性化、修辞有效性和操纵并非同义词。区分有说服力的论述与侵犯个人自主权之间的界限,在于过程的透明度、对我们脆弱性的保护,以及倾听者保留异议空间的真实可能性。

1. 规模化说服:超越算法心灵感应的神话

要理解真正正在发生的事情,必须清除一个普遍存在的幻觉:人工智能模型并不“知道”我们的感受,也不拥有通往我们意识的心灵感应窗口。它们拥有的是在行为数据、心理测量特征和语言修辞结构之间进行统计关联的非凡能力。

发表在《科学报告》上的一项基础性研究(“生成式AI在规模化个性化说服中的潜力”)通过四项主要研究和七项子研究深入分析了这一动态 [1485, 1498]。研究人员考察了由语言模型生成并针对接收者心理特征(如大五人格特质或道德基础理论)调整的信息的有效性。结果清晰地表明,生成式AI完全能够大规模产生个性化说服,相比通用传播,能提高参与度和对信息的认同。

这并不意味着算法是万无一失的,也不意味着每个人都会立即屈服于模型的影响。更现实地说,这意味着机器可以通过识别与读者价值观最兼容的“框架”(framing)来打破对信息的自然抵抗。有效性并非来自某种说服魔法,而是来自传播摩擦的逐步消除:当一个论点恰好用我们的道德词汇与我们对话时,我们往往会放下批判性防御。

2. 擂台上的辩论:对话不对称

当说服从静态文本转向动态对话互动时,它变得更加深入。与人工智能实时讨论不等同于阅读一份个性化传单:这意味着面对一个即时计算回应、探测异议、绕过矛盾且从不体验情感疲劳的对话者。

发表在《自然·人类行为》上的一项引起巨大反响的预注册研究(“论GPT-4的对话说服力”)在关于两极分化社会政治议题的简短辩论中检验了这种不对称性,比较了人类对话者和GPT-4在有或无法获取参与者社会人口信息的条件下的表现 [1488]。浮现的数据令人震惊:在个性化辩论条件下,即模型了解其对话者的人口统计框架时,GPT-4获得的辩论后同意概率比人类对手高出81.2%。

这一优势不应被任意外推到任何日常互动——实验设置是受控的且局限于特定主题——但它描绘了机器修辞能力的质的飞跃。AI不寻求妥协;它计算最优论证轨迹,将用户引向期望的终点。

然而,正如arXiv上一篇预印本形式的广泛批判性综述(“大语言模型的说服:实证证据、研究方法和伦理影响的综述”)所强调的,算法说服的整体有效性远非铁板一块 [1489]。通过分析分布在政治、商业、公共卫生和营销领域的数十项实证研究,作者强调实际影响因所使用的模型、互动类型(开放式或结构化)以及决定性因素——披露——而有显著差异:事先知道正在与AI对话,在许多情况下往往会恢复人类的警惕性怀疑态度。

3. 法律与伦理边界:《AI法案》第5条

面对能够根据个体心理构造来塑造论点的模型,合法的修辞在哪里结束,非法操纵从哪里开始?

国际层面的主要立法参考是欧洲《AI法案》第5条,专门针对被明确禁止的人工智能实践 [1486]。欧盟立法者划定了一条值得准确理解的红线,避免简单化:法律并不禁止任何形式的说服性或情感吸引型传播。那将是不可能的,也是适得其反的,因为说服是民主、教育和商业的基础。

第5条明确禁止的是使用故意操纵性、潜意识或欺骗性技术,其目的或效果是显著扭曲一个人的行为,损害其做出知情决定的能力,并造成(或合理可能造成)身体或心理上的重大伤害。此外,还绝对禁止利用与年龄、残疾或特定社会经济条件相关的脆弱性。

正如隐私未来论坛的一份深入分析(“欧盟《AI法案》下的红线”)所阐明的,法律从业者和程序员面临的运营挑战在于将这条红线转化为可衡量的标准 [1490]。仅仅问信息是否个性化是不够的;关键问题变成了:

  1. 系统只是在调整语言风格,还是在识别并打击认知脆弱性或暂时性脆弱时刻(如丧亲、焦虑危机或财务崩溃)?
  2. 接收者是否有工具认识到正在进行有针对性的算法影响尝试?
  3. 此人是否保留了认知和时间空间来批判性地评估论点并自由地表示异议?

操纵恰恰发生在机器与个人之间的信息不对称变得如此显著,以至于消灭了后者的决策自主权之时。

4. 自主权的侵蚀与共享公共领域的终结

算法说服最隐蔽的伦理问题不在于明目张胆的诈骗或明显损害的场景,而在于集体辩论的无声侵蚀。

在经典的审议模式中,当一位政治领袖、一个科学机构或一家公司提出一个想法时,他们是在一个共享的公共舞台上这样做。论点对所有人可见:可以被同行质疑,被媒体拆解,被持相反观点的人批评。存在一个共同空间,论点的有效性在那里接受检验。

为单个用户生成的算法说服将这个舞台碎片化为数百万个互联的孤独。如果每个公民都收到一个量身定制的现实版本,为其恐惧和希望量身打造,公共讨论就会崩溃。我们不再基于共享事实进行辩论,而是对微观校准的刺激做出反应,以解除我们特定认知防御的武装。最终风险是构建一个社会,其中共识并非源于真理的力量或提案的善意,而是源于信息对倾听者弱点的数学优化。

关键运营要点(面向设计师、机构和公民的要点)

  • 强制实施算法披露(面向监管者): 当用户正在阅读内容被动态调整为其心理测量特征的文本或与代理对话时,必须始终被告知。说服意图的透明度是保护认知自主权的第一道盾牌。
  • 禁止利用情境脆弱性(面向开发团队): 商业模型的架构必须包含伦理护栏,当传感器或浏览数据检测到用户处于强烈情绪压力、失眠、抑郁或经济脆弱状态时,阻止激活激进的劝说杠杆。
  • 培养数字批判卫生习惯(面向公民): 我们必须习惯于识别情感框架的模式。当在线内容引发即时的完全本能认同或强烈道德警报反应时,首先要问的不应只是“这是真的吗?”,而是:“为什么这篇文章看起来像是专门为触动我最敏感的按钮而写的?”

选择的脆弱性

人工智能的演进正将我们置于一面令人不安的镜子前。我们面对的不是全知的预言家,而是我们自己心理倾向的精巧放大器。算法并非从虚无中创造我们的信念:它只是寻找我们确定性中已存在的裂缝,用我们愿意接受的确切语言潜入其中。

这种外科手术般的效率迫使伦理反思走出计算机教室,去质询数字时代自由意志的本质。如果一个论点能说服我们,不是因为它在本质上更真实、更公正或更有据可查,而仅仅是因为它被数学优化以利用我们特定的情感架构,我们还能声称我们自由地选择了自己的想法吗?还是我们只是在用我们的智识自主权交换那种被用永远完美的言辞告知我们想听的答案的安心感?

参考文献与来源

本文由La Bussola dell’IA – 场景与反思专栏编辑部撰写。