高效填充 NumPy 数组中的零值位置:向量化实现无循环批量赋值
本文介绍一种纯 numpy 向量化方法,将源数组 y 中每行的非零元素,按顺序填入目标数组 x 每行最靠前的零值位置,全程避免 python 循环,适用于大规模矩阵(如 5000×20000)高频操作。
本文介绍一种纯 numpy 向量化方法,将源数组 y 中每行的非零元素,按顺序填入目标数组 x 每行最靠前的零值位置,全程避免 python 循环,适用于大规模矩阵(如 5000×20000)高频操作。
在科学计算与数据预处理中,常需将一个数组的“有效值”精准注入另一个数组的空白槽位(即零值位置),且要求严格保持行内顺序与位置优先级。典型场景包括稀疏特征对齐、掩码填充、增量更新等。当矩阵规模达万级行列且操作频次极高时,Python 显式循环会成为严重性能瓶颈。本文提供一种完全向量化、无 for 循环、内存友好的 NumPy 实现方案。
核心思路:布尔索引 + 累计计数定位
关键在于两点:
Replit Ghostwrite
一种基于 ML 的工具,可提供代码完成、生成、转换和编辑器内搜索功能。
- 识别“空位”:X == 0 得到布尔掩码 i1,标记所有可写入位置;
- 定位“前 kᵢ 个空位”:利用 i1.cumsum(1) 对每行从左到右累计零值个数,再与每行非零元数量 i2.sum(1, keepdims=True) 比较,构造精确写入掩码。
具体逻辑如下:
- i1 = X == 0:获取 X 中所有零值位置;
- i2 = Y != 0:获取 Y 中所有非零值位置(即待复制的元素);
- i2.sum(1, keepdims=True):计算每行 Y 的非零元素个数 k_i,保持列维度;
- i1.cumsum(1)
- 最终掩码 (i1.cumsum(1)
- Y[i2] 按行优先顺序拉平所有非零元素,恰好与目标位置一一对应(NumPy 高级索引的扁平化规则保障此一致性)。
完整实现与示例
import numpy as np
def fill_empty_np(X: np.ndarray, Y: np.ndarray) -> None:
"""
将 Y 中每行的非零元素,依次填入 X 中对应行最左侧的零值位置。
要求:X.shape == Y.shape,且对每行 i,X[i] 中零的个数 >= Y[i] 中非零个数。
原地修改 X,不返回新数组。
"""
i1 = X == 0
i2 = Y != 0
# 构造写入掩码:仅在 X 的零位中,且是前 k_i 个零位的位置赋值
mask = (i1.cumsum(axis=1) <= i2.sum(axis=1, keepdims=True)) & i1
X[mask] = Y[i2] # Y[i2] 自动展平,与 mask 中 True 位置按行优先顺序对齐
# 示例验证
X = np.array([[1, 0, 1, 1, 0],
[1, 0, 0, 1, 1],
[1, 0, 0, 0, 0]])
Y = np.array([[0, 0, 2, 0, 0],
[0, 0, 0, 2, 2],
[2, 0, 2, 2, 0]])
fill_empty_np(X, Y)
print(X)
# 输出:
# [[1 2 1 1 0]
# [1 2 2 1 1]
# [1 2 2 2 0]]
注意事项与性能提示
- ✅ 严格形状匹配:X 与 Y 必须同形,否则 cumsum 和 sum(..., keepdims=True) 广播失败;
- ✅ 容量保证:算法不校验 X 每行零位是否足够 —— 若 m_i
- ⚠️ 内存开销:生成多个临时布尔/整型数组(i1, i2, cumsum, mask),对超大矩阵(如 5000×20000)可能占用数 GB 内存;若内存受限,建议分块处理或改用 Numba(如答案中提及);
- ⚡ 性能对比:该方案比纯 Python 循环快 10–100 倍,但比 Numba JIT 编译版本慢约 2–5 倍(因未短路、全量计算);如追求极致性能且可引入额外依赖,推荐搭配 @njit(parallel=True) 重写;
- ? 不可逆操作:函数原地修改 X;如需保留原始 X,调用前使用 X_copy = X.copy()。
掌握此模式,你不仅能高效解决当前问题,更能迁移应用于各类“按条件定位+批量赋值”的 NumPy 工程场景。
如非特殊说明,本站内容均来自于网友自主分享,如有任何问题均请联系我们进行处理!
猜您喜欢
斗罗大陆:传承主线高效刷图队搭配思路
2026-07-07斗罗大陆传承高效刷图队阵容搭配,本期为玩家们量身推荐一套高效刷图队,让魂师们轻松实现“一键速刷”,下面就来看看这套阵容的具体配置与打法思路吧。 斗罗大陆:传承主线高效刷图队搭配思路: 一、高效刷图队 搭配思路:马红俊和宁荣荣破法放大队伍元素伤害,唐三旋风锤法大范围元素伤害 主C:唐三 流派:附伤旋风 通用魂技 涅槃复苏、巨人杀手、冲锋号角、坚定风采、不动龙钟 套装魂骨:泰坦巨猿套装 通用魂骨:赤魔...
我要当老祖资源高效分配指南
2026-07-03我要当老祖资源高效分配指南:灵石优先升功法与长老,宠物等成型后再培养;勾玉每日必花仙盟捐赠、宠物秘籍、体力及前期晶矿,剩余存着买皮肤(祝融、句灵等),竞技场备三套皮肤即可。商店兑换:仙盟换紫自选,梦境优先晶矿,竞技场换金碎片,坊市紫自选+晶矿+绿古宝,宠物商店换对应蛋,混元攒4000换金自选,宝库除灵宠丹、易容丹外全换。 我要当老祖资源高效分配指南 1.灵石(核心消耗优先级:功法>长老>宠物) 获...
讯飞听见:高效办公场景下的录音转写与文档同步
2026-06-28讯飞听见在办公场景的价值在于“转得准、理得清、用得上”,将录音秒变可检索、可编辑、可延展的结构化文档,支持实时录音边录边写、AI纪要生成、思维导图与AI写作等闭环应用。 ☞☞☞AI智能聊天,问答助手,AI智能搜索,多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜ 讯飞听见在办公场景中真正发挥价值,不在于“能转文字”,而在于“转得准、理得清、用得上”。它把录音这个原始信息载体,快速变成可检索、可编辑...
讯飞听见高效办公实战:从语音笔记到智能办公文档
2026-06-28讯飞听见通过“听、记、写、管”四步闭环实现办公提效。语音实时转写并结构化,支持多语种与方言,准确率近98%;自动生成会议纪要,含概要、要点、待办;AI写作延展输出模板化文档;跨设备协同统一归集至讯飞文档,支持协作与复用。 ☞☞☞AI智能聊天,问答助手,AI智能搜索,多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜ 讯飞听见不是简单把语音变文字,而是把日常办公中“听、记、写、管”四个动作串成一条高效...
讯飞听见文档整理功能:高效处理工作访谈与电话录音
2026-06-28讯飞听见文档整理功能聚焦工作访谈与电话录音场景,实现说话人自动区分、声纹记忆、打点纪要生成及多格式导出。它支持系统级内录与外录导入,提供语篇规整、热词优化、时间锚点待办清单,并适配PDF/Word/TXT导出及正式纪要模板。 ☞☞☞AI智能聊天,问答助手,AI智能搜索,多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜ 讯飞听见的文档整理功能,不是简单把录音变成文字,而是围绕工作访谈和电话录音这类高...
《红色沙漠》游戏高效捕鱼方法介绍
2026-06-13《红色沙漠》中的抓鱼钓鱼也是游戏里比较重要的一种收入来源,而想要快速捕鱼就需要一些技巧,其中速度最快的捕鱼方法就是用鱼笼,捕鱼点位的位置就在佩伦城下方区域的格雷洛克渡口码头。 红色沙漠怎么快速捕鱼 本文内容来源于互联网,如有侵权请联系删除。
苹果笔记本怎么快速打开最近访问的文件夹_Finder高效快捷键【解析】
2026-06-04苹果笔记本可通过启用访达边栏“最近”智能文件夹、使用“打开最近的项目”菜单、Spotlight搜索加时间限定词、终端命令刷新缓存及路径栏跳转五种方式快速定位并打开最近访问的文件夹。 如果您在苹果笔记本上需要快速定位并打开最近访问的文件夹,但发现每次都要手动逐层导航或依赖记忆路径,则可能是由于未启用或未掌握访达(Finder)中内置的“最近”智能文件夹及关联快捷机制。以下是实现该目标的具体步骤: 一...
电脑截图快捷键是哪个?多种高效电脑截图技巧分享
2026-06-04Win+PrtScn一键全屏截图并自动保存至“图片/屏幕截图”文件夹;Alt+PrtScn精准截当前窗口;Win+Shift+S自由选区截图并支持标注;Mac用Command+Shift+3/4/4+空格实现全屏、区域、窗口截图。 你需要在会议中快速截取ppt某页重点内容,或向同事发送微信窗口里的错误提示,又或者保存网页长图却找不到保存按钮——这些场景下,掌握原生快捷键能让你三秒内完成截图,不用等...
红玉高效获取攻略 游戏升级材料快速收集指南
2026-06-04要说红玉产出最稳的地图,那必须是谢园残巷!这里堪称红玉的“稳定出产地”,平均每刷三到四轮就能收获一颗,欧气爆棚的玩家甚至能连续两场直接掉落,运气简直逆天!而且这张图的怪群密度恰到好处——既不会因怪物过于密集而手忙脚乱,也不会因分布太稀疏而空跑耗时,路线更是简洁明了:从入口一路直奔boss,全程无绕路、无隐藏点、无机关解谜,省下的时间足够多刷一轮,效率直接拉满。试想一下,你点开地图选中谢园残巷,进门...
如何修复Python aiohttp请求时出现的ClientPayloadError?
2026-06-04ClientPayloadError表明服务端提前关闭连接,非客户端代码错误;常见于服务端超时、拒绝大响应或代理截断,需通过抓包、检查响应头、服务端日志及添加读取超时和异常处理来定位解决。 ClientPayloadError通常意味着服务端提前关闭了连接 这个错误不是客户端代码写错了,而是aiohttp在读取响应体时发现服务端已经断开了连接。常见于服务端超时、主动拒绝大响应、或代理/网关(如Ng...
