ChatGPT的革命性体现在大模型的“涌现能力”。

ChatGPT展现出来的令人惊艳的对话理解与表达能力，让越来越多人意识到，人工智能已经迎来了全新的里程碑。并且有望作为一个至关重要的基座系统，以前所未有的速度渗透进各行各业，持续引爆未来世界的数字经济体系。近日，复旦大学计算机科学技术学院教授、MOSS系统负责人邱锡鹏在接受21世纪经济报道记者专访时表示，ChatGPT的革命性体现在大模型的“涌现能力”上。在大模型训练过程中，出现了一些意外的、超乎预期的能力表现。据悉，在训练计算量大概在10的22次方之后，模型能力会完成从量变到质变的飞跃，呈现出惊人的爆发式增长。 “比如说你读两本书可能就背下来，但是当你读1万本的时候，你可能就理解了一些道理，当你读1亿本的时候，很可能融会贯通，从中掌握世界的规律。”邱锡鹏表示。但大模型具体是怎样在突破某个值后突然变得智能，仍然是个未解之谜。不过，“涌现”的出现似乎也证明了一条路是正确的，即扩大模型规模，即可使其具有“智能”。在AI围棋打败人类棋手之时，Google Bert的参数规模为3亿；2020年后GPT-3横空出世，参数量级已经跨越到了1750亿。涌现能力的背后，则进一步隐含着三个非常重要