news 2026/4/23 15:14:12

python数据分析——查找

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
python数据分析——查找

准备工作

首先导入 Pandas 库,并读取所需的数据集,为后续操作做准备:

python

运行

import pandas as pd # 读取UFO目击报告数据 ufo = pd.read_csv('uforeports.csv') # 读取各国饮品消费数据 drinks = pd.read_csv('drinksbycountry.csv') # 读取IMDB电影评分数据 movies = pd.read_csv('imdbratings.csv')

一、缺失值填充(fillna 方法)

fillna()是 Pandas 中处理缺失值的核心方法,关键在于 **inplace参数 ** 的使用,直接影响是否修改原数据。

1. 原地填充缺失值(修改原数据)

python

运行

# 用'VARIOUS'填充ufo数据中'Shape Reported'列的缺失值,直接修改原数据 ufo['Shape Reported'].fillna(value='VARIOUS', inplace=True)
  • 作用:直接在原 DataFrame 的Shape Reported列上操作,将所有缺失值(NaN)替换为VARIOUS,原数据被永久修改。

2. 非原地填充缺失值(返回新对象)

python

运行

# 生成填充缺失值后的新Series,原数据不受影响(inplace=False为默认值,可省略) ufo['Shape Reported'].fillna(value='VARIOUS', inplace=False)
  • 作用:不会修改原数据,而是返回一个缺失值已被填充为VARIOUS的新 Series 对象。
  • 注意:如果不将新对象赋值给原列(如ufo['Shape Reported'] = ...),此次填充操作不会对原数据产生任何影响。

3. 统计填充后的数据分布

python

运行

# 统计'Shape Reported'列各值的出现次数(包含填充后的'VARIOUS') ufo['Shape Reported'].value_counts()
  • 结果:此时统计的是填充缺失值后的列数据,VARIOUS的数量对应原本的缺失值数量。

二、特殊格式数据读取(read_table 方法)

当数据文件的分隔符不是默认的逗号时,可使用read_table()指定分隔符读取:

python

运行

# 以'|'为分隔符读取数据,不设置表头(列名),并显示前5行 pd.read_table('movieusers.csv', header=None, sep='|').head()
  • 关键参数:
    • sep='|':指定数据的分隔符为竖线|(默认是制表符\t);
    • header=None:表示数据文件没有表头行,Pandas 不会自动将第一行作为列名;
    • .head():仅显示数据的前 5 行,便于快速预览。

三、数据筛选与定位

1. 布尔索引筛选行

通过条件判断筛选出符合要求的行,是 Pandas 中最常用的筛选方式:

python

运行

# 筛选drinks数据中'continent'列值为'South America'(南美洲)的所有行 drinks[drinks.continent == 'South America']
  • 逻辑拆解:
    1. drinks.continent == 'South America':生成布尔值 Series(True/False),标记每行是否符合条件;
    2. drinks[布尔Series]:保留布尔值为 True 的行,返回筛选后的子 DataFrame。

2. loc 索引器精准定位(按标签索引)

loc是按行标签 + 列标签定位数据的核心工具,支持单个值、多行多列的索引。

(1)定位单个单元格值

python

运行

# 定位行标签为23、列名为'beer_servings'的单元格值 drinks.loc[23, 'beer_servings']
(2)修改行索引后定位

若将列设为行索引,可直接用新索引标签定位:

python

运行

# 将'country'列设置为drinks的行索引(原地修改原数据) drinks.set_index('country', inplace=True) # 定位行标签为'Brazil'、列名为'beer_servings'的单元格值 drinks.loc['Brazil', 'beer_servings']
(3)从统计结果中定位值

结合描述性统计与loc,提取指定统计指标:

python

运行

# 先对drinks做描述性统计,再提取'beer_servings'列的25%分位数(第一四分位数Q1) drinks.describe().loc['25%', 'beer_servings']
  • 逻辑:drinks.describe()生成数值列的统计指标(count、mean、25%、50% 等),返回的 DataFrame 以统计指标为行标签,原列名为列标签,再通过loc定位目标值。

3. 填充缺失值(针对 drinks 的 continent 列)

python

运行

# 对drinks的'continent'列做非原地缺失值填充,返回新Series drinks['continent'].fillna(value='VARIOUS', inplace=False)
  • 核心逻辑:
    1. drinks['continent']:选中目标列(Series 对象);
    2. fillna(value='VARIOUS'):将列中缺失值替换为VARIOUS
    3. inplace=False:返回填充后的新 Series,原数据不变。

四、Series 算术运算(索引对齐规则)

Pandas 的 Series 运算遵循索引标签对齐规则,仅匹配标签的元素会参与运算,不匹配的返回 NaN。

python

运行

# 创建自定义Series(索引为国家名,值为人口数) people = pd.Series([3000000, 85000], index=['Albania', 'Andorra'], name='population') # 将drinks的'beer_servings'列与people按索引对齐后相乘 drinks.beer_servings * people
  • 结果说明:
    • drinks.beer_servings的索引包含AlbaniaAndorra,则这两个标签对应的元素会相乘;
    • 其余标签因无匹配的people索引,结果为 NaN。

五、选择指定行数据

使用loc索引器选择多行数据:

python

运行

# 选择ufo数据的前3行(行标签为0、1、2),并返回所有列 ufo.loc[[0, 1, 2], :]
  • 简化写法:ufo.loc[0:2, :]loc的切片包含结束标签,与 Python 原生切片不同),或ufo.head(3)(直接返回前 3 行)。

总结

  1. 缺失值填充inplace=True原地修改原数据,inplace=False返回新对象(默认),需赋值才会生效;
  2. 数据定位:布尔索引用于行筛选,loc按标签定位(行 + 列),是 Pandas 索引的核心工具;
  3. Series 运算:遵循索引对齐规则,仅匹配标签的元素参与运算,不匹配则为 NaN。
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/23 12:29:04

TRAE CN 企业版正式发布:让 AI 成为企业研发的确定性生产力

12月18日,字节跳动旗下 AI 编程工具 TRAE CN 企业版正式发布,旨在为企业提供高效、安全、可定制的 AI 编程解决方案。2025 年被视为 AI 编程元年,大模型在代码生成、补全、审查等场景中展现出切实的效果与价值。AI 编程正在企业开发中快速普及…

作者头像 李华
网站建设 2026/4/17 12:12:22

前端事件循环:宏任务与微任务的深度解析

你以为JavaScript是单线程的,但它却用事件循环实现了"伪异步"。理解宏任务和微任务,是掌握现代前端异步编程的关键。引言:从一道经典面试题说起javascriptconsole.log(1);setTimeout(() > {console.log(2); }, 0);Promise.resol…

作者头像 李华
网站建设 2026/4/21 17:08:11

Java 实现 RTF 转 Word:完整技术指南

在企业办公自动化、文档管理系统以及跨平台应用中,文档格式的兼容性问题一直是开发者面临的常见挑战。RTF(Rich Text Format)以其结构简单、跨平台兼容性强的特点,仍被广泛应用于文本传输、邮件附件和轻量级文档保存。而Word 文档…

作者头像 李华
网站建设 2026/4/23 12:31:33

Langchain-Chatchat物理安全防护知识库构建

Langchain-Chatchat物理安全防护知识库构建 在大型园区、数据中心或关键基础设施中,安保人员常常面临一个尴尬的现实:最权威的安全制度文件就存放在内网服务器上,但当突发火警需要查阅应急流程时,翻找文档的时间可能远超黄金处置窗…

作者头像 李华
网站建设 2026/4/20 11:04:28

Langchain-Chatchat量子计算对加密影响知识库

Langchain-Chatchat 构建量子计算与加密安全知识库的实践路径 在信息安全的前沿战场上,一场静默却深远的技术变革正在酝酿。随着量子计算原型机不断突破物理极限,曾经坚不可摧的RSA、ECC等公钥加密体系正面临前所未有的挑战。Shor算法一旦在实用化量子计…

作者头像 李华