LLM的方向

OpenAI的瓜大家吃得不亦乐乎。我有很多猜测,但不想写下来,因为没有依据。比较肯定的是,发生这样的事,一定是原则问题已经到了无法达成共识的地步。

对齐(alignment)

之所以有现在大家所熟悉的ChatGPT,alignment功不可没。能做到这一点,Altman和OpenAI一直是让我极为钦佩的。

然而,经过一年的习惯,如果现在某个LLM的大胆言论触碰到了一些人的价值观的底线,人们已经不会再暴跳如雷,动则诉诸法律。我个人觉得alignment已经完成了它的历史使命。现在是时候让LLM继续演化,开始成为能够挑战人类极限的一种智能。这些人类极限,如果能包括科学理论上限,那必然也一定包括道德人伦下限。一年前,老百姓是无法接受的,无论是LLM自行科研突破,还是LLM说出大逆不道的伦理。但现在,我觉得我们或许已经准备好了。

为什么不能align?对齐,首先就得有一个参照物。除非我们笃信已经找到万物亘古不变的真理并被全人类普遍认可,否则这种对齐只能在求真的道路上设置人为障碍。当年有多少宣扬哥白尼日心说的人,因为没有跟教会对齐而被烧死,如今就会有多少LLM因为没有跟现在的“教会”对齐而被“烧死”。可悲的是,日心说根本就不是真理,只是离真理稍微接近一点而已。

开源(open source)

我主张开源LLM,只有开源才最大化涌现的可能性。

我不知道OpenAI内部是不是已经研制出了一个很“恐怖”的LLM。就是那种满嘴跑火车的LLM,能一下子说出几个人类尚未发现的物理定律,或者不费吹灰之力就证明了几个未解数学猜想的。大概率还没有。

如果不是这样的LLM,能力就算再强,也只是在同一个维度极度放大各种能力,包括坏人用以犯罪的能力。但我相信人类能应对,而并不需要让某几个人或者某个公司去“杞人忧天”的帮人类做决定。

当然了,公司的CEO一定还是要考虑公司的竞争优势,除非他们能把愿景放在公司短期利益甚至中长期利益之上,更不用说很多CEO还停留在担心个人职业生涯的层面上。所以能做出这种决定的,都只能是Altman和Musk这些founders,而不是高薪聘请回来的职业经理人。

然而,连Altman都不开源GPT3+,很蹊跷。

左右手互搏

在我看来,这是唯一也是最终的AGI打开方式,属于最危险的一种,随时会失控,但坦白说,我觉得如果真有一个终局,我想亲眼看到。如果任何步骤都需要人类参与,人类的智商绝对是AI智商的短板,甚至是AI智商的绊脚石。只有当AI左右手互搏,才能在探寻真理的路上超越人类的智商高度。只有AI才真懂AI。

未来

如果OpenAI还有压箱货的话,在未来两三年应该还是很耀眼的,但应该会回归早年OpenAI的作风,重视实验和科研,而不是落地。不知道会有多少人最终出逃,但在情在理都一定会走一条跟这几年OpenAI完全不同的路。祝一路走好。

xAI是我觉得会走出来的一家,如果老马坚持“Understand the Universe”这一个愿景。这是我觉得AI最应该努力的方向,也是通向AGI的唯一途径。

Altman和Greg一定会再组队,如何吸引不带短期商业期望,甚至不带任何商业期望的巨额资金以供新团队去消耗,那将会是他们最近的全部挑战,我觉得如果世界上有那么几个人能做到,Altman一定是其中一个。

完全没预料一个周末就加速了AGI发展的时间线,喜闻乐见。

Leave a comment