当前位置:当前位置: 首页 >
为什么我还是无法理解transformer?
文章出处:网络 人气:发表时间:2025-06-25 06:25:09
不要想的太过复杂,就只有随机数生成的三个矩阵,原始输入已经通过矩阵相乘关联在三个随机数矩阵中,再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵,再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重,三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏,没有什么复杂的逻辑问题。
。
同类文章排行
- 中国的导弹水平到底怎么样?
- 我是新手想养鱼,预算不超过200。有什么好的建议或者禁忌吗。?
- Office 中为何还要保留 Access 数据库?
- 未来江苏会不会被广东越甩越远?
- 2025 年 6 月,Rust 在 GUI 方面有何大的进展? 你最看好哪个框架?
- 既然C#等开源语言,为啥***le还要弄个基本上一模一样的Swift?
- 如何看待黄奇帆称「中国房地产消费的居民负债占家庭收入比重达 137.9% ,需调整抑制消费政策」?
- 一枚东风41能直接干掉一艘航母吗?
- 我的世界怎么租一个四个人的服务器?
- 大家猜猜伊朗的结局如何?
最新资讯文章
- 移动的合约套餐可以取消吗?怎样才能取消?
- 如何评价首个女性友好的编程语言HerCode?
- 为什么剪映导出***时码率与原***一样,变得更模糊?
- 有一个乌克兰的朋友问我,中国人凭什么能享受和平,我该怎么说?
- 2025年了 Rust前景如何?
- 我毕业想成为前端工程师,可是前端技术太多,越学越多,可是我想成为技术强的人,又很无助,怎么办?
- 林志颖和韩寒的赛车技术如何?
- 马上领证了,发现男朋友离不了游戏,让他少打游戏他会非常生气,正常吗?
- 微信服务器会保留聊天记录吗,会保存多久?
- 你曾看到空乘做过的最傻的事情是什么?
- 请教下这款技嘉主板如何开启TMP2.0?
- 上海房价会不会再跌百分之50%?
- 你见过身边身材最好的女生是什么样子的?
- polars到底行不行?
- 你卡过最厉害的bug是什么?






关注公众微信号
移动端,扫扫更精彩