当前位置:当前位置: 首页 >
为什么我还是无法理解transformer?
人气:发表时间:2025-06-25 03:30:10
不要想的太过复杂,就只有随机数生成的三个矩阵,原始输入已经通过矩阵相乘关联在三个随机数矩阵中,再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵,再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重,三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏,没有什么复杂的逻辑问题。
。
同类文章排行
- 网络小白如何建立一个网站,供别人下载文件(主要是PDF和MP3)?
- 前端如何设计网页?
- 目前最具性价比的全栈路线是啥?
- 为什么Dreamwe***er,FrontPage会被淘汰?
- 中国外交部及有关使领馆正迅速组织撤离在以、伊的中国公民,目前当地情况如何?
- 为什么人类喝地球的水需要过滤,而其他任何一种地球的生物可以直接喝地球的水?
- 以总理称已控制伊朗首都领空,领空被控制意味着什么?伊朗还可以通过空袭反击吗?
- ***《凡人修仙传》有哪些令人伤感的情节?
- ***拍大尺度片子时摄影师不会看光吗?
- 开战斗机从上海到北京要多久,那是一种什么样的体验?
最新资讯文章
- 大家身边得肺癌的人后来怎么样了?
- 做好的flask项目怎么部署到服务器,使用公网ip可访问?
- 越正经的女人越容易做出疯狂的事吗?
- 男朋友说我穿衣服太开放,难道好身材不应该显示出来吗?
- 目前最具性价比的全栈路线是啥?
- 如何评价字节跳动开源的 HTTP 框架 Hertz ?
- 男的真爱一个女生会是什么样子的?
- PHP现在真的已经过时了吗?
- 如何评价网络统计男方失业超过一年,女方提出离婚概率超80%?
- 苏超能否培养出中国的足球社区文化?
- 国产手机AI「好用」的背后,是技术差距还是文化差异?
- 周杰伦为什么不告粥饼伦黑伦侵犯他的名誉权?
- 美国不交房产税会被赶人收房,那所谓的永久产权还有什么意义?
- 为什么Dreamwe***er,FrontPage会被淘汰?
- Golang和J***a到底怎么选?
- 男朋友说我穿衣服太开放,难道好身材不应该显示出来吗?
- 以总理称已控制伊朗首都领空,领空被控制意味着什么?伊朗还可以通过空袭反击吗?
- 女朋友是体育生是一种什么体验?
- 搞了NAS之后去哪里下载4K,8K的电影?
- 有一个乌克兰的朋友问我,中国人凭什么能享受和平,我该怎么说?





