Pandas替换含特定字符串的方法详解
时间:2026-03-26 17:27:57 395浏览 收藏
本文深入讲解了如何利用Pandas精准识别并统一处理包含“Financial Services”这一关键词的各类不规范字符串(如独立出现、作为前缀/后缀、或与其他类别用逗号拼接等),通过布尔掩码匹配、安全替换与分组聚合三步联动,高效实现语义归一化与数值合并,彻底解决因文本表达不一致导致的统计失真问题——无论你是刚接触数据清洗的新手,还是寻求可复用、可维护、可扩展的生产级解决方案的资深分析师,这套简洁可靠的操作范式都能帮你快速提升数据质量与分析可信度。

本文详解如何使用Pandas定位包含“Financial Services”的所有字符串条目,将其标准化为单一标签,并合并对应数值(如Count),实现数据清洗与聚合的一体化操作。
本文详解如何使用Pandas定位包含“Financial Services”的所有字符串条目,将其标准化为单一标签,并合并对应数值(如Count),实现数据清洗与聚合的一体化操作。
在数据分析实践中,常遇到分类字段存在不规范表达的问题——例如“Financial Services”以独立项、前缀、后缀或与其他类别用逗号拼接(如"Financial Services,Lending and Investments")等多种形式共存。若直接按原始字符串分组统计,会导致同一业务领域被拆散计数,严重削弱分析准确性。此时,需先语义归一化(semantic normalization):识别所有含目标关键词的记录,统一重命名为标准名称,再执行聚合。
以下为完整、可复现的操作流程:
✅ 步骤一:构建示例数据
import pandas as pd
df = pd.DataFrame({
"category_groups_list": [
"Health Care",
"Financial Services,Lending and Investments",
"Real Estate",
"Financial Services",
"Financial Services,Professional Services",
"Financial Services,Real Estate",
"Administrative Services, Financial Services"
],
"Count": [10, 15, 5, 20, 25, 10, 30]
})✅ 步骤二:模糊匹配 + 批量替换
使用 .str.contains() 进行子串搜索(默认大小写敏感;如需忽略大小写,添加 case=False 参数)。注意:该方法返回布尔Series,可直接用于布尔索引:
# 创建掩码:标记所有包含 "Financial Services" 的行
mask = df["category_groups_list"].str.contains("Financial Services")
# 将匹配行的 category_groups_list 统一设为标准值
df.loc[mask, "category_groups_list"] = "Financial Services"⚠️ 关键注意事项:
- str.contains() 默认启用正则引擎,若待查字符串含正则特殊字符(如 .、*、+),需显式设置 regex=False 避免意外匹配;
- 空值(NaN)会导致 contains() 返回 NaN,进而使 loc 赋值失效。稳妥做法是补充 na=False:
mask = df["category_groups_list"].str.contains("Financial Services", na=False)
✅ 步骤三:按新分类聚合求和
替换完成后,直接调用 groupby(...).sum() 即可完成合并统计:
result = df.groupby("category_groups_list", as_index=False).sum()
print(result)输出:
category_groups_list Count 0 Financial Services 100 1 Health Care 10 2 Real Estate 5
? 扩展建议
- 若需保留原始多类别结构(如拆分逗号分隔项再展开),可结合 str.split().explode();
- 对更复杂的归一化逻辑(如“Fin. Services”→“Financial Services”),推荐使用 str.replace() 配合正则或自定义映射字典;
- 生产环境中,建议将清洗逻辑封装为函数,并添加日志记录替换行数,提升可维护性与可追溯性。
通过以上三步,你不仅能解决当前问题,更能掌握 Pandas 字符串清洗与聚合的核心范式:匹配 → 替换 → 聚合,为后续结构化分析奠定坚实基础。
今天带大家了解了的相关知识,希望对你有所帮助;关于文章的技术知识我们会一点点深入介绍,欢迎大家关注golang学习网公众号,一起学习编程~
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
208 收藏
-
270 收藏
-
232 收藏
-
309 收藏
-
110 收藏
-
372 收藏
-
125 收藏
-
264 收藏
-
170 收藏
-
293 收藏
-
262 收藏
-
311 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 485次学习