当前位置:当前位置: 首页 >
为什么我还是无法理解transformer?
人气:发表时间:2025-06-25 16:40:17
不要想的太过复杂,就只有随机数生成的三个矩阵,原始输入已经通过矩阵相乘关联在三个随机数矩阵中,再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵,再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重,三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏,没有什么复杂的逻辑问题。
。
同类文章排行
- 男的真的会把所有衣服从上到下都扔洗衣机吗?
- 男朋友说我穿衣服太开放,难道好身材不应该显示出来吗?
- 伊朗为什么会被中俄抛弃?
- 如何看待近期抖音大量博主刷屏比亚迪高端化失败?
- 为什么美军B2实战以后认为一部分网友又没信心了?
- 美国为什么不发展高铁?
- 求大神解答,为什么大家都不喜欢用docker?
- 养龟你踩的最大的坑是什么?
- 如何看待 Rust 的应用前景?
- 伊朗若拥有巴基斯坦的中国防控体系,能否把美国的B2轰炸机打下来?如果打下会对世界局势产生什么影响?
最新资讯文章
- 为什么好多人开空调抠抠搜搜的?
- 你的低成本爱好是什么?
- 2025年,笔记软件又如何选择?
- 程序员加班的真正原因是什么?
- 为什么美军B2实战以后认为一部分网友又没信心了?
- 为什么部分高中生下课那么喜欢跑着去抢饭吃?
- 为什么体制内大家看起来都很平庸?
- B站充电专属***有被爬虫破解过吗?有无解析工具?
- 为什么现在女孩子爱好烘焙,在相亲中也成了槽点了?
- 为什么很多人在1panel推出之后,还坚持用宝塔面板?
- 韩国人为什么处处与中为敌,难道他们不知道自己是芝麻小的小国吗?
- 如何评价Cursor?
- 有没有电视机的听歌软件,要免费的?
- 胖东来真有网上说的那么好吗?
- 吵架后,老公快一个星期不联系,是要离婚的节奏吗?
- 《碟中谍 8》都有哪些槽点?
- 现代艺术只考虑意义、不考虑美感吗?
- 韩国人为什么处处与中为敌,难道他们不知道自己是芝麻小的小国吗?
- 为什么Go仅仅160MB的安装包就可以编译程序,而Rust却还需要几个GB的VC++才能编译?
- 男朋友说我穿衣服太开放,难道好身材不应该显示出来吗?