讲师中心 微信公众号

工具推荐

视频效率加速
剧云
剧云

中文短剧剧本制作平台

AniShort
AniShort

AI短剧协同制作平台

立刻MV
立刻MV

低成本歌曲 MV、视频生成

Seko
Seko

AI短剧一键生成成片

PyTorch 中的广播机制与矩阵乘法:彻底厘清常见误解

雨浩姑娘_3692

雨浩姑娘_3692

发布时间:2025-12-29 18:08:31

|

177人浏览过

|

来源于php中文网

原创

PyTorch 中的广播机制与矩阵乘法:彻底厘清常见误解

本文澄清 pytorch 中广播(broadcasting)与矩阵乘法(`matmul`)的本质区别:广播不适用于形状不兼容的逐元素运算(如 `+`),而 `x @ y` 或 `torch.matmul(x, y)` 才是正确执行 2×4 与 4×2 矩阵乘法的方式。

在 PyTorch 中,初学者常将「形状满足矩阵乘法条件」与「支持广播运算」混淆。实际上,二者遵循完全不同的规则:

  • *逐元素运算(如 +, -, `,/)依赖广播机制**:要求张量在每个维度上满足广播兼容性——即从尾部维度开始比对,任一维度为1或两维度相等,才能自动扩展。 例如:X.shape = (2, 4)与Y.shape = (4, 2)**无法广播**,因为最后维度4 ≠ 2,倒数第二维2 ≠ 4,且无维度为1可触发扩展。因此X + Y` 报错:

    RuntimeError: The size of tensor a (4) must match the size of tensor b (2) at non-singleton dimension 1

    这明确指出:第 1 维(0-indexed)尺寸不匹配,且均非 1,广播失败。

  • 矩阵乘法(@ 或 torch.matmul)不依赖广播,而是遵循线性代数规则:只要 X 的最后一维等于 Y 的倒数第二维(即 X.shape[-1] == Y.shape[-2]),即可计算。本例中 X 为 (2, 4),Y 为 (4, 2),满足 4 == 4,结果为 (2, 2):

    PyTorch Linux版 2.11.0
    PyTorch Linux版 2.11.0

    PyTorch 2.11.0 历史版本下载,来自 PyPI 官方发布,适合旧项目兼容、实验复现和指定环境安装。

    下载
    import torch
    X = torch.tensor([[1,5,2,7],
                      [8,2,5,3]])      # shape: (2, 4)
    Y = torch.tensor([[2,9],
                      [11,4],
                      [9,2],
                      [22,7]])         # shape: (4, 2)
    
    result = torch.matmul(X, Y)  # 或 X @ Y
    print(result)
    # 输出:
    # tensor([[229,  82],
    #         [149, 111]])

⚠️ 注意:torch.mm() 仅支持 2D 张量,而 torch.matmul() 支持高维批量矩阵乘(如 (b, m, k) @ (b, k, n) → (b, m, n)),并可在必要时对缺失的 batch 维度进行隐式广播(如将 (2,4) 视为 (1,2,4) 与 (4,2) 相乘)。但这种广播是 matmul 内部行为,不改变逐元素运算的广播规则。

✅ 正确实践建议:

  • 需逐元素运算?先确保形状兼容或显式 unsqueeze()/expand();
  • 需矩阵乘法?直接用 @ 或 torch.matmul(),无需手动调整形状;
  • 调试时善用 .shape 和 torch.broadcast_shapes()(PyTorch 2.0+)验证广播可行性。

归根结底:广播不是“万能适配器”,而是有严格维度对齐规则的逐元素操作机制;而矩阵乘法是独立的、基于线性代数定义的运算——二者不可混为一谈。

热门AI工具

更多
WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

SoundView
SoundView Hot

SoundView是一款面向跨境电商的视频翻译、配音和本地化 AI 创作平台。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

码上飞
码上飞 Hot

一款基于自然语言的AI应用开发平台,可根据用户描述自动生成应用程序,帮助个人和团队快速完成应用原型与开发。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

相关专题

更多
pytorch是干嘛的
pytorch是干嘛的

pytorch是一个基于python的深度学习框架,提供以下主要功能:动态图计算,提供灵活性。强大的张量操作,实现高效处理。自动微分,简化梯度计算。预构建的神经网络模块,简化模型构建。各种优化器,用于性能优化。想了解更多pytorch的相关内容,可以阅读本专题下面的文章。

2583

2024.05.29

Python AI机器学习PyTorch教程_Python怎么用PyTorch和TensorFlow做机器学习
Python AI机器学习PyTorch教程_Python怎么用PyTorch和TensorFlow做机器学习

PyTorch 是一种用于构建深度学习模型的功能完备框架,是一种通常用于图像识别和语言处理等应用程序的机器学习。 使用Python 编写,因此对于大多数机器学习开发者而言,学习和使用起来相对简单。 PyTorch 的独特之处在于,它完全支持GPU,并且使用反向模式自动微分技术,因此可以动态修改计算图形。

68

2025.12.22

Go-Zero API开发使用教程
Go-Zero API开发使用教程

本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。

60

2026.11.12

Go-Zero安装与goctl环境配置教程
Go-Zero安装与goctl环境配置教程

本专题围绕Go-Zero的安装与工具链配置展开,讲清Go版本要求、goctl安装方式、代理镜像、protoc依赖与环境变量设置,说明多版本共存、升级回退与CI流水线安装的做法,并整理安装阶段的常见报错与验证步骤。

40

2026.11.12

Go-Zero零基础入门教程
Go-Zero零基础入门教程

本专题整理Go-Zero的入门知识,从框架定位、环境准备到跑通第一个API服务,讲清目录分层、配置加载、日志与中间件的基本用法,并对比Gin、Kratos的差异,帮助Go开发者建立整体认知,判断它是否适合当前项目。

20

2026.11.12

Postman身份认证怎么配置
Postman身份认证怎么配置

本专题从实际API接口调试场景出发,讲解Postman身份认证的完整配置流程,包括常见认证协议介绍、授权参数设置、访问令牌填写、OAuth 2.0授权及认证失败排查,帮助用户正确完成接口授权与访问验证。

140

2026.11.06

Postman请求头Headers怎么设置
Postman请求头Headers怎么设置

围绕Postman HTTP请求头配置展开,讲解Headers选项的具体使用方式,包括Key和Value参数填写、请求头信息添加、常见Header字段设置及请求头修改方法,帮助用户解决接口调试过程中遇到的请求头配置问题。

120

2026.11.06

Postman接口请求发送教程
Postman接口请求发送教程

详细介绍Postman接口请求的创建与发送方法,涵盖GET和POST请求、URL配置、请求参数、Headers请求头、Body请求体设置以及响应结果查看,帮助用户掌握Postman接口请求的完整操作流程。

100

2026.11.06

DBeaver怎么导入数据
DBeaver怎么导入数据

DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。

100

2026.11.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn