设为首页收藏本站
天天打卡

 找回密码
 立即注册
搜索
查看: 89|回复: 17

pandas读取excel统计空值数量错误的解决方法

[复制链接]

4

主题

59

回帖

207

积分

中级会员

积分
207
发表于 2024-4-20 09:45:41 | 显示全部楼层 |阅读模式
问题: pd.read_excel()读取excel数据后,用pd.isnull().sum()统计空值数量不对,代码如下
  1. import pandas as pd

  2. df = pd.read_excel('test.xlsx',dtype=str)
  3. # 剔除空格
  4. df = df.applymap(lambda x : str(x).strip())
  5. print("b列为空的个数为"+ str(pd.isnull(df['b']).sum())) # 打印出来b列中为空的是0个
复制代码
excel数据长这样,B2是一个空格,希望得到空值为2的结果

问题分析:
读取excel后的df是这样

使用applymap剔除空格后的df是这样

读取excel后的df的值(df.values)

使用applymap剔除空格后的df的值(df.values)

可以看到,在applymap方法处理后
值values的变化:一个空格变成了’’,之前的nan变成了’nan’(这里是字符串nan,当然不为空)
pd.isnull()只会统计NaN的数量,一个是字符串’‘,一个是字符串’nan’,因此都统计不到
解决: 将’'和’nan’全部替换为np.nan,isnull就可以统计到
  1. import numpy as np
  2. import pandas as pd

  3. df = pd.read_excel('test.xlsx',dtype=str)
  4. # 剔除空格
  5. df = df.applymap(lambda x : str(x).strip())
  6. df[df == ''] = np.nan
  7. df[df == 'nan'] = np.nan
  8. print("b列为空的个数为"+ str(pd.isnull(df['b']).sum())) # 打印出来b列中为空的是2个
复制代码
到此这篇关于pandas读取excel统计空值数量错误的解决方法的文章就介绍到这了,更多相关pandas读取excel空值内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!


免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×

0

主题

51

回帖

103

积分

注册会员

积分
103
发表于 2024-4-25 14:21:43 | 显示全部楼层
能给个链接吗?我想深入了解一下。

3

主题

57

回帖

180

积分

注册会员

积分
180
发表于 2024-5-10 06:42:43 | 显示全部楼层
牛逼
  • 打卡等级:无名新人
  • 打卡总天数:2
  • 打卡月天数:0
  • 打卡总奖励:27
  • 最近打卡:2024-05-25 21:31:39

2

主题

48

回帖

167

积分

注册会员

积分
167
发表于 2024-5-18 17:28:10 | 显示全部楼层
我不太确定,可能需要再确认一下。

0

主题

40

回帖

79

积分

注册会员

积分
79
发表于 2024-6-14 09:25:55 | 显示全部楼层
我想了解更多

4

主题

58

回帖

203

积分

中级会员

积分
203
发表于 2024-6-18 21:48:51 | 显示全部楼层
这个话题真是有趣,我也对它感兴趣。

1

主题

41

回帖

105

积分

注册会员

积分
105
发表于 2024-7-15 21:17:20 | 显示全部楼层
我不确定这个信息的准确性,请再确认一下

1

主题

44

回帖

109

积分

注册会员

积分
109
发表于 2024-7-17 21:58:24 | 显示全部楼层
这个话题很有趣,我想多了解一些

0

主题

41

回帖

83

积分

注册会员

积分
83
发表于 2024-7-17 22:54:38 | 显示全部楼层
感谢分享,受益匪浅!

2

主题

49

回帖

141

积分

注册会员

积分
141
发表于 2024-9-5 14:55:26 | 显示全部楼层
同意你的观点,我们有共鸣。
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|小黑屋|爱云论坛 - d.taiji888.cn - 技术学习 免费资源分享 ( 蜀ICP备2022010826号 )|天天打卡

GMT+8, 2024-11-15 05:12 , Processed in 0.086109 second(s), 28 queries .

Powered by i云网络 Licensed

© 2023-2028 正版授权

快速回复 返回顶部 返回列表