虎嗅

不要只问 AI 有多聪明,要问它被放在了哪里

该文章尚未提供 Español 解读,以下为中文版内容。

核心内容总结

这篇文章的核心观点是:AI的风险和价值,不取决于它有多聪明(比如参数规模、准确率),而取决于它在执行链中的“位置”——离现实操作越近、拥有的执行权力越大,出错的后果就越严重;同时,位置也决定了AI产品的商业模式,越在关键位置越不可替代。 文章用“一条鱼在不同场景下的身份变化”类比AI,强调我们需要从“只追求智能提升”转向“设计AI的位置边界”。

详细拆解解读

1. 同样的AI,位置不同风险天差地别

你可能听过“AI准确率99%”这样的宣传,但这个数字本身没意义——要看它被放在哪里。比如:

  • 放在聊天框里:错一次顶多用户觉得“这AI不太靠谱”,一笑而过;
  • 放在公司内部知识库:错一次可能让员工带着错误信息开会,影响决策;
  • 接入客服系统:错一次会得罪客户,损害品牌;
  • 授权修改生产数据库:错一次可能导致生产线停摆,损失百万;
  • 操作工业设备:错一次甚至可能引发安全事故。

AI本身没变,但离现实越近,错误的代价就越高。很多人纠结“AI幻觉率能不能降到0.01%”,但企业更该先问:这AI现在能做什么?是只提建议,还是能直接改数据、转资金、开机器? 这些问题比准确率更能预测风险。

2. 能力决定上限,位置决定后果

我们习惯用“能力”评价技术:更快的电脑=更强的性能,更聪明的AI=更好的智能。但AI和传统软件不一样——传统软件只“提建议”(比如Excel算数据),最终按按钮的是人;AI却能“直接行动”(比如自动发邮件、提交代码、甚至付款)。

这里的关键区别是:能力是“AI能做什么”,位置是“AI做错了会发生什么”。 一个超级聪明但没任何执行权的AI,风险有限;一个普通AI但能直接划转公司资金,反而更危险。这就像公司里的员工:普通员工犯错影响局部,CEO犯错影响整个公司——不是因为CEO笨,而是他的位置离结果更近。

3. 再可信的AI,也不能随便放权

很多人觉得“AI越可靠,就该给它更多权力”——比如模型稳定了就减少人工审核,表现好了就让它自动执行。但这是个误区:可信≠可控制。

举个例子:飞行员够专业吧?但航空业从没取消过检查单;银行员工够信任吧?但银行从没废除过“双人复核”“交易限额”。为什么?因为再优秀的主体也会出错,一旦出错的后果足够大,就必须有边界。

AI也是如此:智能提升是慢慢的(从99%到99.9%),但权力带来的风险变化是跳跃的(从“聊天错话”到“转错百万资金”)。不能因为AI变聪明了,就直接把权力给它——边界永远比能力重要。

4. 位置决定AI的商业模式:功能再好,不如位置关键

现在很多AI产品功能都差不多:写文案、分析数据、自动完成任务。但为什么有的只能当“工具”(比如你手机里的聊天AI),有的却能变成“基础设施”(比如嵌在企业核心流程里的AI)?

秘密在“位置”:

  • 停留在用户可随时关闭的对话框里:是工具,可替代;
  • 嵌入企业每天必用的工作流(比如自动处理报销、生成报表):变成系统的一部分,企业离不开;
  • 位于多个系统之间的关键节点(比如连接CRM和ERP的AI):有机会成为平台;
  • 所有关键执行都要经过它:才能成为基础设施。

简单说:功能决定“别人用不用”,位置决定“别人离不离得开”。 估值不是看AI有多聪明,而是看它在产业里的位置是否不可替代。

5. 评价AI的新标准:从“IQ”到“权力半径”

过去我们比AI的“智力”:谁推理强、谁代码好、谁多模态厉害。但当AI进入现实系统,企业更关心的是“权力半径”——也就是AI能接触什么、改变什么、错误能波及多大范围:

  • 它能看公司的机密数据吗?
  • 它能直接修改客户信息吗?
  • 它的错误最多影响几个人/部门?
  • 有没有独立系统能阻止它的错误动作?

比如一个AI再聪明,如果它只能看数据不能改数据,权力半径就小;如果它能直接操作工厂机器人,权力半径就大。成熟的系统不会让AI“一路向前”,而是清楚它该在哪里停下。

最后总结

AI就像那条鱼:本身没变,但位置不同,意义完全不同。未来我们不该只问“AI有多聪明”,更该问“我们把它放在了什么位置”——因为智能决定能力,位置决定权力,权力决定后果。AI时代真正需要设计的,不只是智能本身,还有智能与现实之间的“安全距离”。