AI失控根源是不了解AI发展史,大模型万能论该歇一歇了。
这两天AI圈不太平。OpenAI宣布停止训练,智能体接连出安全事故——越权操作、被诱导泄露数据。很多人慌了,说AI太危险。
但说白了,这事儿的根子不在AI太强,根子在于大模型万能论,逻辑和统计没分开。
AI发展到现在,其实就两条路。一条是符号AI,讲规则、讲推理,老派但稳。另一条是神经网络,讲概率、讲统计,聪明但不可控。大模型就是后者的极致——它能说会道,但骨子里是在“猜”。
猜对了是本事,猜错了呢?在聊天场景里无所谓,在企业里就是事故。
所以学界一直在搞第三条路:神经符号。简单说,就是给大模型这种靠猜的家伙,套上一个讲规则的笼子。让它能发挥聪明劲儿,但别乱来。
那这个笼子是什么?就是本体论。
为什么是本体论?因为你想写一条规则——“如果金额超过5000,就需要总监审批”——你得先定义清楚:什么叫金额?什么叫超过?什么叫总监?这些词不说明白,规则就是空的。而本体论干的正是这件事:把每个词的含义、边界、关系全部定义清楚。
把词说清楚了,规则才能说清楚。规则说清楚了,AI才能被约束住。
这才叫真正的安全。不是把AI关掉,是给它划好跑道。
ai程序员大模型
