About LLM/ChatGPT | 它进行不了真正的对话

1

这是一篇粗糙的记录,大部分都只是阶段性的直觉,充满臆测和误读。决定写这种文章仅仅是为了在我对这个话题暂时丧失兴趣前做一个小结,是我对自己注意力的涣散的一种对抗。

2

我承认ChatGPT的革命性,但其革命性仅体现在由其准确率大幅提升所带来的应用上的更多可能性,并没有超出一般语言模型的讨论范围 – 它依然仅是基于词与词的关联性进行的统计学游戏。

我所听到的对其最中肯的评价就是『ChatGPT是一个sensemaking model』,即它只能在封闭的语境下输出仅在语义上合理的叙述性或总结性内容。

3

但我并非想说ChatGPT无法进行真正的对话是因为它还只是『Stochastic Parrot』,即并不理解内涵,仅能根据概率生成文本。

GPT模型,或者说语言模型,之所以无法进行真正的对话是因为它仅能在『意义指称论』 – 名称与对象、命题与事实之间存在着对应关系 – 生效的范围能活动,但『意义指称论』仅仅是人类的众多语言游戏的其中一种。即便GPT在训练过程中『涌现』出了对词语的理解,超越了『Stochastic Parrot』,也仅仅是学会了这一种游戏而已。

当然,任何人都可以选择同样只在这个范围使用语言并声称ChatGPT已经达到了进行“真正的”对话的标准,然后快乐的迎接被其取代的时代。

4

语言的使用和理解必须放回真实的生命体验,回到『粗糙的地面上来』。人与人之间的对话的意义不仅在于说了什么,更在于没说和无法说的那些。

一切数学问题最终都有可能被计算机解决,但人类的价值恰恰在无法归纳为数学问题的那些偶然、意外,不可思议。

We feel that even if all possible scientific questions be answered, the problems of life have still not been touched at all. Of course there is then no question left, and just this is the answer. 
– Ludwig Wittgenstein

但这并不影响我依然认为数学是人类最美妙的发明。

5

因此,原本我对这个话题毫无兴趣 – 我不认为由此产生了什么值得探讨的新问题。但我在和朋友讨论的过程中发现,讨论GPT,或者说讨论AI,可以迫使我反复重新审视人类的意义与边界,所以不应该逃避。

6

To pose the question “what can think” inevitably also changes, in a reverse feedback loop, the terms of “who can think”.

Think of the Turing test as a magic trick. Like all good magic tricks, the test relies on getting you to accept at an early stage assumptions that will determine how you interpret what you see later. The important intervention comes not when you try to determine which is the man, the woman, or the machine. Rather, the important intervention comes much earlier, when the test puts you into a cybernetic circuit that splices your will, desire, and perception into a distributed cognitive system in which represented bodies are joined with enacted bodies through mutating and flexible machine interfaces. As you gaze at the flickering signifiers scrolling down the computer screens, no matter what identifications you assign to the embodied entities that you cannot see, you have already become posthuman.
– N. Katherine Hayles

7

但我其实既不够了解维特根斯坦,也不够了解后人类。

8

另外,虽然如何更好的应用这些不断迭代的新模型确实是个重要的问题 – 毕竟很多人对大部分工具的使用效率也就是乌鸦的水平,但更重要的问题恐怕是要如何应对呈指数型增长的由人工智能生产出来的赛博垃圾,即老生常谈的如何培养信息素养(大笑。