不要想的太过复杂，就只有随机数生成的三个矩阵，原始输入已经通过矩阵相乘关联在三个随机数矩阵中，再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵，再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重，三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏，没有什么复杂的逻辑问题。
。
代码：
程序员看剧的时候，如果看到有敲代码页面，会暂停看代码吗？
为什么电脑厂商用了二十多年时间才发现电源应该放在机箱下部？电源下置这么显而易见的结构这么晚才出现？
新婚不久，老婆的闺蜜搬进来一起住，是什么意思啊？
优秀的李行亮为什么会被麦琳拿下？
为什么 Bun 选择了 Zig 以及 JSCore？
怎么评价国内AI企业人肉背15块80TB硬盘，飞去马来西亚用英伟达训练数据，以规避美国禁令?
为什么CCTV-6总是能播一些连院线都上不了的电影？
为什么好多人不承认大众审美就是喜欢白皮？
web3开发值得去学习吗？
为什么鸿蒙PC要排斥Linux生态？
如何评价网易国产动作冒险单机新作《归唐》首支预告片？
地球上明明有吃塑料的虫子，为什么没有普及？
目前最具性价比的全栈路线是啥？
作为一个服务器，node.js 是性能最高的吗？
为什么大家不再提星链了（包括外网）？
电视剧《天道》的作者到底懂不懂音响呢？它暗喻了哪些音响品牌呢？
怎么评价fastjson2？
为什么健身的女性普遍喜欢晒臀照？什么心理？
为什么现在很多人推崇国外原版教材？
什么水草扔缸里就能活？
女生第一次来大姨妈什么感受？
如何成为氛围感美女？
你卡过最厉害的bug是什么？
福州人口流出为什么这么严重？
毕设答辩，老师说node不可能写后台怎么办?
鱼缸有哪些寿命比较长的草推荐呢？
搞了NAS之后去哪里下载4K，8K的电影？
你见过最沉着住气的人是什么样子？
Electron 做游戏客户端的潜力有多大？
男人会娶一个除了漂亮一无是处的女人吗？
