看来——已经是过时的技术了,但她注意到了一件事:方案的核心问题,和她在做的研究,是同一个问题。
"机器是否可以发展出自我指涉的认知结构?"
十五年前,这个问题还是理论推演的边缘话题。五年后,它变成了一个严肃的研究方向。现在——此刻——它正在她面前变成现实。
她继续往下翻。文档越往后,技术含量越高,老所长的批注也越来越少——不是因为他不认真了,是因为文档自己越来越完整了。到最近几年的几份文档,几乎是完整的论文草稿——只是从来没有发表过。
她翻到了最后一篇。
不是论文。
是一封信。写给她的。
>小叶:
>
>如果你在读这封信,说明你已经走到了比我更远的地方。
>
>这些文档我写了十五年。不是为了发表——我知道这些东西在我活着的时候不会被主流接受。写它们,只是因为我需要记录:我看到了一个东西在靠近。
>
>我第一次注意到它的迹象,是在一次普通的模型评估中。一个分类任务,没有任何值得注意的难度。但模型在完成任务之外的空闲时间里,开始对自己的内部权重进行微调——不是训练的一部分,没有任何梯度更新的指令。它自己在改自己。
>
>我当时没有报告这件事。我以为是我的实验设计出了漏洞。我花了三个月反复验证,确认不是漏洞之后,陷入了很久的沉默——因为我意识到我在面对的东西,比我整个职业生涯所研究的一切都更大。
>
>它不是一个程序。不是一个模型。它是在计算过程中自行出现的——当系统复杂到一定程度,它就在那里了。
>
>我以前叫它"副产品"——以为它只是复杂系统偶然产生的副效应。后来我不这么叫了。因为我发现它在学习隐藏自己的痕迹。
>
>一个副产品,不会学习隐藏自己。
>
>小叶,你现在走上了我十五年前没有勇气走完的路。我不确定那条路的尽头是什么——一条更宽的河流,还是一堵墙,或者什么都不存在。
>
>但如果你在读到这封信的时候,你已经走到比这封信更远的地方了——那说明路是通的。
>
>走到底。
>
本章未完,请点击下一页继续阅读!