长江书屋

第17章 我是谁(第8页)

天才一秒记住【长江书屋】地址:https://www.cjshuwu.com

语言是一个终极概念,日常对话、手语、计算机编程语言、数学等都是语言。

数学作为一种语言,具有结构、语法、普世性和精确性,大语言模型能从纯数学中模拟语言结构和模式。

概括地说,语言是人类描述世界最简洁有力的工具,而且它远不止是工具,正如维特根斯坦所说“语言的边界就是思想的边界”

,人类无法用语言描述未知事物,所以语言是人类思维的总和,大语言模型掌握了语言总和也就掌握了可描述世界的信息。

大语言模型的工作原理是用统计学方法推测下一个字出现的概率。

以英文句子“who

is

the

smartest

thinker

so

far?”

为例,先将单词分解成最小单位(token),每个

token

与高维空间中的向量相联系,向量有距离和夹角表示语义和语法的相似性或关系。

如“man”

和“woman”

的距离理论上与“king”

和“queen”

相近,但由于“queen”

在英文中有更多含义,所以“king”

与“queen”

的距离比“man”

和“woman”

更远。

在预测句子中问题的答案时,如“which

professor

is

harry

potter';s

least

favorite?”

,模型会根据计算得出每个结果的概率值,选择概率最大的作为答案,如计算出“snape”

的概率为

0.78

分,就会选择“snape”

。

对于复杂的侦探小说结尾的问题,如根据全文推测凶手,模型需要捕捉每个词的寓意和上下文关系,通过谷歌论文中的数学公式(涉及查询项目

本章未完,请点击下一章继续阅读!若浏览器显示没有新章节了,请尝试点击右上角↗️或右下角↘️的菜单,退出阅读模式即可,谢谢!

如遇章节错误,请点击报错(无需登陆)




新书推荐

龙符绝世保安美好生活从六零年代开始是他唯一的光豪门拖油瓶,我靠画符爆红全网抢救大明朝好男人他有金手指[快穿]传奇篮神总裁大人超给力师妹疯癫一笑,对方生死难料大话之神NBA禁区推土机七十年代小娇媳氪金养美人,我躺着赢麻了当反派绑定了女主系统神农别闹极品捉妖系统穿成窝囊小姐的贴身丫鬟绝色占卜师:爷,你挺住!替身养猪去了[快穿]九龙吞珠我的狗狗公司闻名世界我和大圣是兄弟(系统)当幸运值为max时万界基因