3
一个现象可以窥探这里面是究竟如何工作的
llm 是会把词都映射到高维的向量去,比如男人、女人分别是 x1,x2 ,国王、王后分别是 y1,y2
那么会发现 x1-y1 和 x2-y2 的值是高度相似
我理解在最初的数据集训练(也就是把词映射到高维向量的过程)中,整个模型实际上是有学习到真正知识的
此内容由惯性聚合(RSS阅读器)自动聚合整理,仅供阅读参考。 原文来自 — 版权归原作者所有。