相关文章
attn_scores注意力分计算-记录
querys 是 2*6*2，keys也是2*6*2
attn_scores querys keys.transpose(1,2)attn_scores 最终维度是 266；数值上是两个矩阵的批量矩阵乘法结果，每个样本对应一个 66 的注意力分数矩阵 transpose(1,2) 交换 keys 的第 1 维和第 2 维࿱…
建站知识
2026/1/25 21:13:57
多头注意力中的张量重塑
view
PyTorch 的view() 是张量「重塑（Reshape）」函数，用于改变张量的维度形状但不改变数据本身
在多头注意力中，view()的核心作用是将总隐藏维度拆分为「注意力头数 单头维度」，实现多头并行计算
核心规则
tensor.vie…
建站知识
2026/1/25 21:13:57
OpenHarmony Flutter 分布式安全防护：跨设备身份认证与数据加密传输方案 - 指南
pre { white-space: pre !important; word-wrap: normal !important; overflow-x: auto !important; display: block !important; font-family: "Consolas", "Monaco", "Courier New", …
建站知识
2026/1/25 21:13:57
Java 核心语法精讲：注释、标识符、关键字与数据类型
注释
public class HelloWorld {public static void main(String[] args){//单行注释/*多行注释*/System.out.print("Hello,World!");//JavaDoc：文档注释 /** *//*** @deprecated Hello* @A* */}
}标识符和…
建站知识
2026/1/25 21:03:57
详细介绍：Linux的目录结构
详细介绍：Linux的目录结构2026-01-25 21:01
tlnshuju
阅读(0)
评论(0) 收藏
举报pre { white-space: pre !important; word-wrap: normal !important; overflow-x: auto !important; display: block !important; …
建站知识
2026/1/25 21:03:57
