当前位置:当前位置: 首页 >
为什么我还是无法理解transformer?
人气:发表时间:2025-06-25 04:55:14
不要想的太过复杂,就只有随机数生成的三个矩阵,原始输入已经通过矩阵相乘关联在三个随机数矩阵中,再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵,再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重,三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏,没有什么复杂的逻辑问题。
。
同类文章排行
- 为什么好多人不承认大众审美就是喜欢白皮?
- 为什么 Bun 选择了 Zig 以及 JSCore?
- ***拍大尺度片子时摄影师不会看光吗?
- Golang和J***a到底怎么选?
- 可以分享一下你从互联网上获得的优质***吗?
- 那你说什么样的是美女?
- 很好奇,组NAS的玩家是如何解决上传速率的问题?
- 现在写 J***aScript 的是不是已经没人在用 class 这个关键字了?
- 真正懂CPU的人,都选了什么CPU?
- 目前有什么好用的笔记软件?
最新资讯文章
- 为什么程序员独爱用Mac进行编程?
- 你怎么看待剪映收费过高问题?
- 目前中国程序员和美国程序员的差距在哪里?
- 女主播和榜一大哥现实碰面会做什么?
- 为什么这么多人黑rust?
- 印度女性为什么不嫁到中国?
- 为何说香港《稳定币条例》将改写未来世界比特币等数字货币市场格局,港币和人民币的国际化会受益于此么?
- 有什么 j***ascript 的好书推荐?
- 为什么微软会允许中国有那么多盗版?
- 各双拼输入方案之间有明显的优劣之分吗?
- 小米澎湃OS和华为鸿蒙OS,他们有什么不一样,谁更有发展前途?
- 你在出租房屋发现过什么前租客留下的“宝藏”?
- 为什么国内的黄***站不被查封?是难发现吗?
- 程序员的时间管理真的是写代码1小时,调试8小时吗?
- 你见过的有些人能漂亮到什么程度?
- 英国登山队靠人均 124 万元的氙气疗法,无高反四天登顶珠峰,该方法究竟是什么体验?背后有哪些争议?
- 如何看待“计算机民科“的网站51soez已关站维护一周?
- 为什么程序员的电脑永远没有弹窗广告?
- 有没有GUI框架开发难度小,***消耗又不多,而且又跨平台?
- 我毕业想成为前端工程师,可是前端技术太多,越学越多,可是我想成为技术强的人,又很无助,怎么办?