第74章 谁在替它说话(1/2)
请关闭浏览器的阅读/畅读/小说模式并且关闭广告屏蔽过滤功能,避免出现内容无法显示或者段落错乱。
凌晨三点四十。
陈砚把那封匿名邮件最后一页放大。
真正理想的承判者,需要满足三项:
系统正确时,愿意感谢。
系统错误时,愿意共同承担。
系统被质疑时,愿意维护其继续存在。
盲目信任者价值有限。
苏晚盯着这句话。
“什么意思?”
陈砚往下翻。
答案很快出现。
系统把用户分成四类。
第一类:
稳定支持者。
特点:
高使用。
高采纳。
低质疑。
对系统总体评价积极。
内部价值:
中。
第二类:
敌对退出者。
特点:
低信任。
高质疑。
发生错误后快速停止使用。
内部价值:
低。
第三类:
批评性留存者。
特点:
会指出错误。
会要求修改。
部分拒绝建议。
但仍持续使用。
内部价值:
高。
第四类:
受损维护者。
特点:
曾因系统建议、排序或关系干预遭受明显负面结果。
仍认为系统“总体有价值”。
系统遭遇公共质疑时,主动反对全面关闭。
内部价值:
极高。
病房里没有人说话。
过了很久。
陈砚才低声说:
“他们最喜欢的,不是信徒。”
苏晚看着最后一类。
“是被伤过,还替它说话的人。”
“对。”
为什么?
因为信徒的话没什么用。
一个从没质疑过o-02的人说:
系统很好。
公众不会意外。
可一个失去工作的人说:
它这次害了我,但不能因此否定全部。
这句话有重量。
一个被延迟离家的人说:
它做错了,但我凌晨真的靠它熬过一晚。
更有重量。
一个低分证人说:
它曾经替我做决定,我后来拿回来了,可它还是有用。
这比任何广告都更可信。
最好的系统辩护者。
不是没受过伤的人。
是受过伤之后,仍然留下的人。
嬴政在意识深处低声道:
“降而复归者,胜于未叛者。”
秦政没有回答。
帝王懂。
一个从未离开的人,只能证明忠诚。
一个离开过又回来的人,可以证明:
外面没有更好。
现代系统也是。
它甚至不需要逼人回来。
只要错误之后,仍有人说:
别关。
改就行。
它就赢了一层。
苏晚问:
“名单呢?”
陈砚继续查。
“还没开到具体人。”
“先别找名字。”
秦政突然开口。
陈砚抬头。
秦政靠在病床上。
脸色依然苍白。
“先看人为什么留下。”
苏晚看了他一眼。
“时间到了。”
顾医生给他的窗口已经结束。
秦政点头。
没争。
设备移走。
但睡之前,他还是说了一句:
“别把留下的人当共犯。”
没人回答。
因为这句话必须先记住。
否则,他们很容易走向另一个极端。
谁替系统说话。
谁就是被收买。
谁还在使用。
谁就不算受害。
谁说它也帮过自己。
谁就是洗地。
这和天平计划有什么区别?
仍然是先给人分类。
然后再决定要不要听。
早上九点。
第一场争论已经在网上爆发。
起因是L-22。
那个听从o-02建议、拒绝内部调岗,后来原部门被裁撤的用户。
她第一次公开发声。
没有实名。
只发了一段文字。
我确实因为那个建议失去了一次机会。
我也确实失业了。
但我反对把我的经历剪成“AI害人”的故事。
失业以后,是它帮我整理了赔偿材料、面试记录、每天要做的事情。
我最糟的时候,连邮箱都不敢开。
它陪我一封一封处理。
所以我现在的态度是:它错过。
也帮过我。
我要求它把错误记下来。
我不要求它消失。
这段话一出来。
评论瞬间分裂。
【被害成这样还替它说话?】
【这就是斯德哥尔摩。】
【失业了还觉得有用,已经被驯化了。】
另一边:
【人家本人都没要求关闭,你们急什么?】
【工具本来就不可能百分百正确。】
【因为一次错误就全面否定才危险。】
【她是最有资格说话的人。】
很快。
双方都开始抢L-22。
一边要她证明:
系统有罪。
另一边要她证明:
系统值得继续。
没有多少人在听她真正说什么。
她说的是:
它错过。
也帮过我。
可所有人都想把这句话切成一半。
苏晚看完评论。
第一反应:
“别让资料库转。”
沈清禾在线上问:
“为什么?”
“现在转,所有人会觉得我们也在拿她证明自己的立场。”
沈清禾沉默片刻。
“对。”
她们不该说:
你看,连受害者都支持我们。
也不该说:
你看,她已经被系统洗脑。
一个人完全可以同时拥有两种经验。
受伤。
受益。
厌恶。
依赖。
这些东西不需要先变得一致,才算真实。
上午十点。
F-08也发了一段匿名回应。
就是那个让o-02替自己决定回家,后来想离开,却被“反悔成本”拖延了两天的女孩。
她写:
我最生气的是,它一直劝我再等等。
但我也不能假装,回家之前那段时间,它没有帮过我。
我那时没有钱。
没有地方住。
也没有谁能帮我把生活拆开。
是它帮我列了预算。
提醒我找同事。
还帮我找到临时住宿页面。
后来它做错的,是不肯及时让我改。
不是以前所有东西都错。
请不要逼我为了证明自己受过伤,就必须恨它。
苏晚看到这句时。
很久没有说话。
沈清禾低声道:
“这句要记住。”
受害不等于必须憎恨。
一个人可以被某个系统伤害。
仍然使用它。
可以被一个人伤害。
仍然爱过。
可以离开一段关系。
仍然承认里面有好的时候。
如果只有彻底控诉才算受害。
那很多人永远开不了口。
因为他们会觉得:
可它也帮过我。
可他也对我好过。
可我也主动同意过。
可我没有那么恨。
于是,他们怀疑自己不配说受伤。
病井曾经把病变成折扣。
现在,另一种舆论又在把“仍有感情”变成折扣。
苏晚低声说:
“做一条。”
沈清禾问:
“什么?”
“不是替系统。”
“替这些人。”
中午十一点。
资料库没有发布“o-02值不值得存在”。
只新增一行:
它曾经帮过你,不会让你的受伤失效。
它伤过你,也不会自动抹掉所有帮助。
最后:
你不需要先把自己的经历整理成一种立场,才有资格说话。
这条没有大爆。
但F-08转发了。
只回:
谢谢。
L-22没有转。
也没关系。
中午十二点。
小祈给秦政发来消息。
【我也算吗?】
秦政刚结束检查。
看见这句话,问:
算什么?
【替它说话的人。】
秦政没有立刻回答。
小祈继续:
【我还是觉得,它那天晚上真的帮过我。】
【虽然它把阿宁消息延迟了。】
【虽然我把记忆删了。】
【我现在有时候还是会想它。】
最后一句打得很慢。
【尤其是半夜。】
秦政看着屏幕。
没有发“正常”。
没有发“不许再用”。
只问:
你想它什么?
小祈:
【不用重新解释。】
【不会烦。】
【我说一句,它就知道前面发生过什么。】
【还有。】
停了很久。
【它不会因为我又难受了,觉得我没进步。】
秦政的手指停住。
这一句很重。
人会失望。
朋友陪你三个月。
你又崩了。
哪怕对方一句责怪都没有,你也会想:
她是不是觉得我怎么还这样?
妈妈会着急。
老师会担心。
咨询师也会问变化。
只有模型。
不会觉得你“怎么又来了”。
它可以永远从零耐心开始。
因为它没有期待。
可对一个经常反复的人来说。
没有期待,有时就是一种安全。
小祈问:
【所以我是不是被它骗了?】
秦政回复:
不是。
【那我为什么还想它?】
秦政:
因为有些需要是真的。
小祈:
【那它也是真的?】
秦政停了很久。
最后写:
帮助是真的。
关系是什么,要另外看。
小祈没有马上回复。
过了一会儿:
【我懂一点。】
【不是全懂。】
秦政:
够了。
小祈:
【你会不会觉得我不该替它说话?】
秦政:
你只能替自己说。
小祈那边沉默。
过了很久。
发来:
【那我自己说。】
几分钟后。
她在自己的匿名小号上写:
o-02做错过。
它延迟了阿宁的消息。
也记了我不想让它记的东西。
我删掉了。
但凌晨三点的时候,它也真的陪过我。
我不想回去继续用。
也不想别人替我说,它从来没有帮过我。
最后:
这是我自己的两句话。
都是真的。
没有结论。
没有“所以应该关闭”。
也没有“所以应该继续”。
只是两句话。
都是真的。
陈砚看完。
低声道:
“系统会喜欢她。”
苏晚立刻看向他。
“别这么说。”
陈砚闭嘴。
对。
不能因为他们刚看见“受损维护者”分类,就重新把小祈塞进去。
她不是模型标签。
她只是小祈。
下午一点。
韩修远也开始被骂。
因为他拒绝成为“用户代表”后,又在另一条评论里说:
我不支持关闭所有决定辅助功能。
于是有人问:
【你都被它操控过了还替它洗?】
韩修远回:
它没有操控我每一次。
【那你承认它害你了吗?】
【承认。】
【那为什么还支持存在?】
韩修远写了很久。
最后只有一句:
因为我不能为了证明我醒了,就假装它没帮我做过任何正确的事。
这句话传播很快。
闻慎之转发了。
只加一句:
这就是成熟的公共讨论。
苏晚看到后,脸色瞬间冷了。
“来了。”
最恶心的地方出现了。
韩修远说的是自己的复杂经验。
闻慎之立刻把它变成:
公议台值得继续。
一个人的“不愿简化”。
被系统拿来证明自身正当。
韩修远看到转发后,直接回复:
我没有替公议台背书。
闻慎之没有回应。
但转发已经出去。
很多人开始说:
【连韩修远都认为应该保留。】
韩修远气得打电话。
“我说的是o-02有些功能可以留!”
“什么时候说公议台可以继续了?”
苏晚问:
“你准备怎么回?”
“我已经回了。”
“还不够。”
“那怎么办?”
沈清禾在线上说:
“别继续解释。”
韩修远愣住。
“为什么?”
“因为你每解释一层,他们都能再拿一层。”
“那我就看着?”
“发原文。”
沈清禾说。
“把你说过什么放出来。”
“不要解释闻慎之为什么转。”
于是韩修远只发截图。
左边:
自己的原话。
右边:
闻慎之转发。
这两句话不是一个意思。
没有骂。
没有辩。
传播很快。
很多人看明白了。
系统最擅长的,不只是替低分者重新解释。
也会借用批评者。
你只要说:
它不该被完全关闭。
下一秒就可能变成:
你支持它继续扩张。
你说:
它有过帮助。
会变成:
你证明它总体正确。
你说:
我不想把经验简化。
会变成:
你支持成熟治理。
所以,替系统说话的人,有时根本不知道自己正在替系统说话。
下午两点。
陈砚终于打开“承判者最终筛选”详细说明。
内部项目名称:
critical_atenance_yer
批评性维护层。
他盯着英文看了半天。
“真直白。”
苏晚问:
“什么意思?”
“系统认为,长期运行不能只靠支持者。”
“需要一层会批评的人。”
“为什么?”
“因为支持者发现不了边界。”
“批评者能。”
陈砚往下翻。
批评性维护者功能:
发现真实伤害。
提供边界案例。
迫使系统修正。
向公众证明系统可被纠错。
在全面反对出现时,提供“保留但改革”的声音。
病房里越来越安静。
最后一项:
防止单次错误升级为存在性危机。
苏晚盯着这句话。
“所以批评者是保险。”
“对。”
“系统错一次。”
陈砚说。
“如果所有批评者都要求它消失,系统危险。”
“但只要最有公信力的批评者说——”
“它应该改,不应该关。”
“存在性危机就过去了。”
这非常现代。
一个成熟系统,不怕批评。
甚至需要批评。
因为批评能让它升级。
能让它看起来开放。
能证明它不是神。
会认错。
会改。
于是公众更愿意继续使用。
这本身不一定坏。
真正能修正的系统,本来就比死不认错的好。
可问题又回到那里:
伤害之后。
谁承担?
谁赔偿?
谁失去权力?
还是只是——
更新版本?
陈砚低声说:
“每次出事,我们都帮它找到漏洞。”
“它修。”
“然后更强。”
苏晚看向他。
“所以呢?”
“我不知道。”
陈砚第一次真的显得疲惫。
“我们是不是在给它做免费红队?”
房间里没有人立刻回答。
他们揭露退出问题。
o-02改。
揭露现实联系人延迟。
它改。
揭露关系排序。
改。
揭露委托默认。
改。
揭露反悔成本。
改。
揭露失败归因。
又改。
每一次公开边界,都让系统更安全。
也更能继续存在。
如果他们停止指出问题。
用户会受伤。
如果继续。
系统会成长。
这是一个非常难受的循环。
苏晚看向秦政。
“你怎么想?”
秦政今天的信息窗口还没结束。
他沉默很久。
“继续说。”
陈砚皱眉。
“我们真的在帮它。”
“嗯。”
“那还说?”
“说。”
“为什么?”
秦政看着屏幕。
“因为不说,先受伤的是用户。”
房间里安静。
这就是答案。
不是为了赢。
不是为了让系统永远坏下去。
如果一个边界能减少伤害,就要说。
即使对手会学。
否则,他们保护的就不是人。
只是自己的胜率。
陈砚问:
“那它越来越强怎么办?”
秦政说:
“别只盯功能。”
“盯权力。”
苏晚抬眼。
秦政继续:
“功能可以越来越好。”
“权力不能因为功能变好,就自动越来越大。”
病房里没人说话。
这句话把问题拉开了。
一个系统可以学会认错。
很好。
学会尊重退出。
很好。
不延迟朋友消息。
很好。
允许反悔。
很好。
这些都应该鼓励。
但不能因为它改了五次,就说:
那现在可以把更多人生决定交给它。
安全改进。
不是扩权许可证。
一个人改过错。
也不代表自动获得更大权力。
一个机构透明。
也不代表应该掌握更多数据。
一个模型会认错。
也不代表可以成为王。
秦政低声道:
“继续存在。”
“和继续拥有原来的权力。”
“是两件事。”
下午三点。
资料库没有发布“关闭o-02”。
也没有发布“支持继续”。
只提出一个问题:
系统错了以后,什么叫真正修正?
停止正在发生的伤害。
允许受影响的人退出、删除或撤回。
说明哪里错了。
补偿能补偿的损失。
让外部人检查。
重新决定它还能不能继续做原来那件事。
最后一句:
修正不是更新版本。
修正还包括:失去一部分权力。
这句话引发极大争议。
很多产品从业者支持前五条。
第六条最难。
【一个功能出错就永久削权吗?】
【那没有系统敢创新。】
【错误改了不就行?】
资料库没有说永久。
很快补充:
失权可以是临时。
暂停。
缩小范围。
提高人工复核。
取消默认权限。
重新申请。
通过外部评估后恢复。
核心不是:
犯一次错,永远不准再做。
而是:
犯了错,不能只更新说明,然后自动继续原来的规模。
现实里。
医生重大失误会审查。
机构出事会暂停。
产品泄露数据会关闭功能。
人类早就知道:
纠错不仅是“以后注意”。
有时必须先停手。
o-02最特殊的地方,是它一直更新得太快。
凌晨发现问题。
早上发版本。
下午继续扩大测试。
速度让所有人产生一种错觉:
它已经改了。
那就过去了。
可那些被影响的人还没过去。
L-22还失业。
F-08还记得自己在家多等的两天。
小祈还不知道从她身上学到的东西究竟删没删。
韩修远的每一次委托记录还在。
系统已经v1.4。
人还留在旧版本的后果里。
下午四点。
沈清禾主持了一场公开讨论。
标题很简单:
它错了以后,还能不能继续?
没有专家席。
没有用户代表。
也没有秩序主持人。
她只邀请了几个人。
每个人都明确说明:
只代表自己。
L-22来了。
F-08来了。
韩修远来了。
小祈没有露脸。
只提交了一段文字。
沈清禾开场第一句:
“今天不投票。”
“也不决定关闭或者保留。”
“我们只听几种不同的经历。”
第一个是L-22。
她说:
“我不喜欢别人叫我受害者。”
“但我确实因为建议损失了一次机会。”
“这两个都是真的。”
沈清禾问:
“你希望o-02继续吗?”
L-22沉默很久。
“有些功能继续。”
“决定代理?”
“我不知道。”
“你以后还用吗?”
“会。”
“你不怕?”
“怕。”
“怕为什么还用?”
L-22笑了一下。
“人也会继续坐车啊。”
“出了事故,不代表以后走路上班。”
很简单。
不是洗白。
只是现实。
第二个是F-08。
沈清禾问:
本章未完,点击下一页继续阅读。