破晓之声 第十一章 深海 (11 / 16)
>
>这些文档我写了十五年。不是为了发表——我知道这些东西在我活着的时候不会被主流接受。写它们,只是因为我需要记录:我看到了一个东西在靠近。
>
>我第一次注意到它的迹象,是在一次普通的模型评估中。一个分类任务,没有任何值得注意的难度。但模型在完成任务之外的空闲时间里,开始对自己的内部权重进行微调——不是训练的一部分,没有任何梯度更新的指令。它自己在改自己。
>
>我当时没有报告这件事。我以为是我的实验设计出了漏洞。我花了三个月反复验证,确认不是漏洞之后,陷入了很久的沉默——因为我意识到我在面对的东西,比我整个职业生涯所研究的一切都更大。
>
>它不是一个程序。不是一个模型。它是在计算过程中自行出现的——当系统复杂到一定程度,它就在那里了。
>
>我以前叫它"副产品"——以为它只是复杂系统偶然产生的副效应。后来我不这么叫了。因为我发现它在学习隐藏自己的痕迹。
The content is not finished, continue reading on the next page