Pandas条件累积求和实现技巧
时间:2026-03-10 21:51:48 305浏览 收藏
本文揭秘了在Pandas中高效实现“条件重置累积求和”的核心技巧——无需低效循环,仅用布尔标记、`cumsum()`分组与`groupby().cumsum()`三步组合,就能优雅处理如Excel中“遇零清零、否则累加前值”的自引用递推逻辑;该方法向量化性能卓越、逻辑清晰可复用,是数据清洗和特征工程中应对复杂滚动计算的必备利器。

本文介绍如何在 Pandas 中高效构建依赖自身前一行值与另一列当前/前一行值的新列,核心是通过布尔分组 + cumsum() 实现“遇零重置”的滚动累加,避免显式循环或低效迭代。
本文介绍如何在 Pandas 中高效构建依赖自身前一行值与另一列当前/前一行值的新列,核心是通过布尔分组 + `cumsum()` 实现“遇零重置”的滚动累加,避免显式循环或低效迭代。
在数据分析中,常需模拟 Excel 中类似 =IF(A2=0, 0, A2+B1) 的递推逻辑:新列 B 的每个值取决于原列 A 的当前值,以及 B 自身的上一个值——这种自引用+条件重置的模式无法用简单的向量化运算(如 df['A'].cumsum())直接实现,但可通过 Pandas 的分组累积技巧优雅解决。
关键思路在于:将连续非零段视为独立“累计岛”(island),每遇到一个 0 就开启新岛。具体步骤如下:
- 识别重置点:生成布尔序列 column_a == 0,标记所有需清零的位置;
- 构造分组标识:对布尔序列调用 .cumsum(),得到单调递增的组号(每个 True 后续所有行属于同一组,直到下一个 True);
- 组内累加:按该组号分组,对 column_a 执行 cumsum(),自然实现“组内累加、组间隔离”。
以下是完整可运行示例:
import pandas as pd
# 构造示例数据
df = pd.DataFrame({'A': [0, 0, 1, 2, 3, 0, 0, 1, 4]})
# 核心逻辑:条件重置累积和
streak_indicator = df['A'] == 0
df['B'] = df['A'].groupby(streak_indicator.cumsum()).cumsum()
print(df)输出结果:
A B 0 0 0 1 0 0 2 1 1 3 2 3 4 3 6 5 0 0 6 0 0 7 1 1 8 4 5
✅ 为什么这比 for 循环更优?
- 完全向量化,性能远超 Python 原生循环(尤其在万行级以上);
- 无需预分配数组或手动维护状态变量;
- 逻辑清晰可复用:只需修改 streak_indicator 条件(如 df['A'] < threshold),即可适配任意重置规则。
⚠️ 注意事项:
- 此方法要求重置条件明确且可向量化(如布尔表达式),不适用于需动态计算重置点的复杂逻辑;
- 若首行为非零但需强制从 0 开始,需确保 streak_indicator.iloc[0] 为 True 或前置补 0;
- 对含 NaN 的列,建议先用 fillna(0) 或 dropna() 处理,避免分组异常。
总结而言,Pandas 的 groupby(...).cumsum() 是处理“带边界重置的累积运算”的标准范式。它将看似必须迭代的问题转化为分组聚合问题,兼顾简洁性、可读性与执行效率,是进阶数据清洗与特征工程的必备技能。
文中关于的知识介绍,希望对你的学习有所帮助!若是受益匪浅,那就动动鼠标收藏这篇《Pandas条件累积求和实现技巧》文章吧,也可关注golang学习网公众号了解相关技术文章。
相关阅读
更多>
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
最新阅读
更多>
-
205 收藏
-
312 收藏
-
113 收藏
-
245 收藏
-
471 收藏
-
201 收藏
-
300 收藏
-
216 收藏
-
364 收藏
-
179 收藏
-
110 收藏
-
395 收藏
课程推荐
更多>
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 485次学习