阅读笔记:万维钢《拐点》

Posted by Nefelibata on Tue 2024-07-16 | | about 1 mins
Last Modified on Tue 2024-07-16

演员郑伊健在一部赛车电影里有句话叫“人要比车凶”,指的是人一定要比工具强势。

——黄仁宇《万历十五年》

一 人要比AI凶

计算机硬件条件的进步推动了AI的发展,而AI(主要是语言模型)之所以能达到今天的高度,主要是因为它足够大。大了,很多能力就涌现出来了。

涌现的意思是,当一个复杂系统复杂到一定程度,就会发生超越系统元素简单叠加的、自组织的现象。

事后分析,涌现新能力的关键机制叫作“思维链”。简单说,思维链就是当模型听到一个东西之后,它会嘟嘟囔囔自 说自话地,把自己知道的有关这个东西的各种事情一个个说出来。

可以预见,如果这条把模型堆大的道路可行,模型的思维能力便越来越强——也就是嘟嘟囔囔,很多事情都自己领悟了。