为什么我还是无法理解transformer？
时间：2025-06-25 04:30:10 来源：网络 人气：
不要想的太过复杂，就只有随机数生成的三个矩阵，原始输入已经通过矩阵相乘关联在三个随机数矩阵中，再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵，再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重，三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏，没有什么复杂的逻辑问题。
。
发表评论
排行
{dede:myad name='right'/}
系统教程
- 多益网络输了餐费官司，准备近几年搬离广州，你怎么看？
- ***拍大尺度片子时摄影师不会看光吗？
- 广西柳江上游出现锑浓度异常，市民称需从消防栓接水或买水，锑可能带来哪些危害？当地需如何妥善解决？
- 上吊后不想死了，能不能手抓吊绳自救呢？就像做引体向上那样？
- 为什么很多人在1panel推出之后，还坚持用宝塔面板？
- 为什么感觉淘宝现在不如拼多多了？
- 夏天女生都衣服很透，里面内衣好明显，真的不是别人想看，本人不会觉得尴尬么？ ?
- 如何评价“寡姐”斯嘉丽·约翰逊的身材？
- 中国的防空系统能有效防止B2、B21这类飞翼隐身战略轰炸机入侵吗？
- 我听说Windows12微软就直接重头构建Windows了，就直接重构Win内核了，到底是不是真的?
评论列表（条）