讲师中心 微信公众号
AI工具推荐 视频效率加速

PyTorch 高级索引:使用不等长索引列表高效批量赋值

冬磊君_5560

冬磊君_5560

发布时间:2026-02-16 14:07:16

|

568人浏览过

|

来源于php中文网

原创

PyTorch 高级索引:使用不等长索引列表高效批量赋值

本文详解如何在 pytorch 中避免显式 for 循环,利用 flatten() + 列表推导式或 scatter_ 实现对二维张量按行、不等长索引列表的高效原地赋值。

本文详解如何在 pytorch 中避免显式 for 循环,利用 flatten() + 列表推导式或 scatter_ 实现对二维张量按行、不等长索引列表的高效原地赋值。

在 PyTorch 中,当需要根据每行独立的、长度不一的列索引列表(如 list_of_indices = [[], [2,3], [1], ...])对二维张量进行批量赋值时,直接使用高级索引(如 x[rows, cols])会因维度不匹配而报错——这是因为 PyTorch 要求索引张量在广播维度上形状兼容,而空列表或变长子列表无法构成合法的张量结构。

最简洁高效的解决方案是将二维张量展平为一维,再将原始行列索引统一转换为全局线性索引。假设输入张量 x 形状为 (n, m),第 i 行中需修改的列为 j₀, j₁, ..., jₖ₋₁,则对应的一维索引为 i * m + j₀, i * m + j₁, ..., i * m + jₖ₋₁。

以下为完整实现示例:

import torch

n, m = 9, 4
x = torch.arange(0, n * m).reshape(n, m)
list_of_indices = [
    [],         # row 0: no change
    [2, 3],     # row 1: set col 2, 3 → indices 1*4+2=6, 1*4+3=7
    [1],        # row 2: set col 1 → index 2*4+1=9
    [],
    [],
    [],
    [0, 1, 2, 3], # row 6: all cols → 6*4+0 to 6*4+3 = 24–27
    [],
    [0, 3],     # row 8: set col 0, 3 → 8*4+0=32, 8*4+3=35
]

# ✅ 方法一:flatten + 线性索引(推荐,简洁、原地、内存友好)
linear_indices = torch.tensor([
    i * m + j 
    for i, cols in enumerate(list_of_indices) 
    for j in cols
])
x.flatten()[linear_indices] = -1

print(x)

输出与循环版本完全一致,且全程无显式 Python 循环,所有计算由底层 CUDA/TensorRT(若启用)加速。

PyTorch Linux版 2.11.0
PyTorch Linux版 2.11.0

PyTorch 2.11.0 历史版本下载,来自 PyPI 官方发布,适合旧项目兼容、实验复现和指定环境安装。

下载

⚠️ 注意事项:

  • x.flatten() 返回的是视图(view)而非副本(只要 x 是连续存储的,而 torch.arange(...).reshape(...) 默认满足),因此赋值操作是原地的(in-place),无需重新赋值回 x;
  • 若 x 非连续(如经转置、窄切片后),请先调用 x.contiguous() 再 flatten(),否则可能触发隐式拷贝或报错;
  • linear_indices 必须为一维 torch.Tensor(dtype 通常为 torch.long),不能是 Python list 或嵌套结构。

✅ 方法二:使用 torch.scatter_(更通用,适合非原地场景或需链式调用)

x_flat = x.flatten()
x_flat.scatter_(0, linear_indices, -1)  # 原地修改 x_flat
x = x_flat.view_as(x)  # 恢复原始形状(view_as 安全,因 shape 匹配)

scatter_ 在语义上更明确表示“向指定位置散射值”,适用于更复杂场景(如多值聚合、不同填充策略),但本例中比方法一略冗长。

? 总结:对于“按行不等长索引赋值”这一高频需求,优先采用 flatten() + 列表推导生成线性索引 的组合。它兼具性能(纯张量运算)、可读性(逻辑直白)和安全性(原地、零拷贝)。避免尝试将 list_of_indices 强行转为不规则张量(如 torch.nn.utils.rnn.pad_sequence),那会引入不必要的 padding 和掩码开销,得不偿失。

热门AI工具

更多
讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

相关专题

更多
go语言 数组和切片
go语言 数组和切片

本专题整合了go语言数组和切片的区别与含义,阅读专题下面的文章了解更多详细内容。

1872

2025.09.03

css中的padding属性作用
css中的padding属性作用

在CSS中,padding属性用于设置元素的内边距。想了解更多padding的相关内容,可以阅读本专题下面的文章。

3012

2023.12.07

pytorch是干嘛的
pytorch是干嘛的

pytorch是一个基于python的深度学习框架,提供以下主要功能:动态图计算,提供灵活性。强大的张量操作,实现高效处理。自动微分,简化梯度计算。预构建的神经网络模块,简化模型构建。各种优化器,用于性能优化。想了解更多pytorch的相关内容,可以阅读本专题下面的文章。

2303

2024.05.29

Python AI机器学习PyTorch教程_Python怎么用PyTorch和TensorFlow做机器学习
Python AI机器学习PyTorch教程_Python怎么用PyTorch和TensorFlow做机器学习

PyTorch 是一种用于构建深度学习模型的功能完备框架,是一种通常用于图像识别和语言处理等应用程序的机器学习。 使用Python 编写,因此对于大多数机器学习开发者而言,学习和使用起来相对简单。 PyTorch 的独特之处在于,它完全支持GPU,并且使用反向模式自动微分技术,因此可以动态修改计算图形。

68

2025.12.22

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

60

2026.10.22

Gradle Wrapper配置教程
Gradle Wrapper配置教程

本专题介绍Gradle Wrapper的基本作用,涵盖文件组成、生成方法、版本配置和任务调用,帮助你理解项目如何使用指定的Gradle版本,减少不同开发环境带来的构建差异。

40

2026.10.22

Golangci-lint检查器使用教程
Golangci-lint检查器使用教程

本专题整理Golangci-lint常用Linters的用途与配置方法,覆盖错误处理、无效代码、安全、复杂度、命名和依赖检查,帮助项目合理选规则。

40

2026.10.22

Gradle怎么构建Java项目
Gradle怎么构建Java项目

本专题介绍Gradle Java项目构建方法,涵盖Java插件配置、依赖声明、源码编译、测试执行和打包检查,帮助你理解各阶段的任务关系,逐步完成项目构建。

20

2026.10.22

PHP时间戳漏洞修复教程
PHP时间戳漏洞修复教程

本专题汇总PHP常见时间戳漏洞,包括2038年溢出、时区漂移、时间戳伪造、重放攻击、时间盲注与日志审计失效等,并给出升级64位环境、使用 DateTimeImmutable、统一UTC、严格超时校验、预处理绑定、hash_equals 比对等修复方案,帮助开发者快速排查和加固时间相关代码。

40

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn