python解决pandas处理缺失值为空字符串的问题


Posted in Python onApril 08, 2018

踩坑记录:

用pandas来做csv的缺失值处理时候发现奇怪BUG,就是excel打开csv文件,明明有的格子没有任何东西,当然,我就想到用pandas的dropna()或者fillna()来处理缺失值。

但是pandas读取csv文件后发现那个空的地方isnull()竟然是false,就是说那个地方有东西。。。

后来经过排查发现看似什么都没有的地方有空字符串,故pandas认为那儿不是缺失值,所以就不能用dropna()或者fillna()来处理。

解决思路:先用正则将空格匹配出来,然后全部替换为NULL,再在用pandas读取csv时候指定 read_csv(na_values='NULL')就是将NULL认为是nan处理,接下来就可以用dropna()或者fillna()来处理了

以上这篇python解决pandas处理缺失值为空字符串的问题就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python实现SMTP邮件发送功能
Jun 16 Python
机器学习的框架偏向于Python的13个原因
Dec 07 Python
python+selenium识别验证码并登录的示例代码
Dec 21 Python
基于Django URL传参 FORM表单传数据 get post的用法实例
May 28 Python
可能是最全面的 Python 字符串拼接总结【收藏】
Jul 09 Python
pandas分别写入excel的不同sheet方法
Dec 11 Python
Python文件打开方式实例详解【a、a+、r+、w+区别】
Mar 30 Python
python3 pygame实现接小球游戏
May 14 Python
利用python实现周期财务统计可视化
Aug 25 Python
Python自定义sorted排序实现方法详解
Sep 18 Python
Django框架请求生命周期实现原理
Nov 13 Python
Python实现排序方法常见的四种
Jul 15 Python
利用Pandas 创建空的DataFrame方法
Apr 08 #Python
django启动uwsgi报错的解决方法
Apr 08 #Python
python 2.7.14安装图文教程
Apr 08 #Python
详解Python中的动态属性和特性
Apr 07 #Python
简单谈谈Python的pycurl模块
Apr 07 #Python
VSCode下好用的Python插件及配置
Apr 06 #Python
VScode编写第一个Python程序HelloWorld步骤
Apr 06 #Python
You might like
新版mysql+apache+php Linux安装指南
2006/10/09 PHP
PHP之数组学习
2011/05/29 PHP
PHP全概率运算函数(优化版) Webgame开发必备
2011/07/04 PHP
PHP 异步执行方法,模拟多线程的应用分析
2013/06/03 PHP
php读取csv文件后,uft8 bom导致在页面上显示出现问题的解决方法
2013/08/10 PHP
php将mysql数据库整库导出生成sql文件的具体实现
2014/01/08 PHP
PHP将MySQL的查询结果转换为数组并用where拼接的示例
2016/05/13 PHP
深入理解PHP 数组之count 函数
2016/06/13 PHP
wordpress自定义标签云与随机获取标签的方法详解
2019/03/22 PHP
tp5(thinkPHP5框架)时间查询操作实例分析
2019/05/29 PHP
js 加载时自动调整图片大小
2008/05/28 Javascript
动态为事件添加js代码示例
2009/02/15 Javascript
兼容IE、FireFox、Chrome等浏览器的xml处理函数js代码
2011/11/30 Javascript
JS将秒换成时分秒实现代码
2013/09/03 Javascript
JSON相关知识汇总
2015/07/03 Javascript
vue-cli3.0 脚手架搭建项目的过程详解
2018/10/19 Javascript
vue中使用v-for时为什么不能用index作为key
2020/04/04 Javascript
Vue中正确使用Element-UI组件的方法实例
2020/10/13 Javascript
python中迭代器(iterator)用法实例分析
2015/04/29 Python
python实现逆波兰计算表达式实例详解
2015/05/06 Python
Python多继承顺序实例分析
2018/05/26 Python
对python中list的五种查找方法说明
2020/07/13 Python
Python定时任务APScheduler安装及使用解析
2020/08/07 Python
通过Canvas及File API缩放并上传图片完整示例
2013/08/08 HTML / CSS
整个世界的设计师家具在哈恩:Designathome
2019/03/25 全球购物
Claire’s法国:时尚配饰、美容、珠宝、头发
2021/01/16 全球购物
毕业生求职自荐信怎么写
2014/01/08 职场文书
租房合同协议书
2014/04/09 职场文书
公司的门卫岗位职责
2014/09/09 职场文书
乡镇计划生育工作汇报
2014/10/28 职场文书
工作检讨书范文
2015/01/23 职场文书
乐山大佛导游词
2015/02/02 职场文书
求职信格式范文
2015/03/19 职场文书
车间主任岗位职责范本
2015/04/08 职场文书
大学生暑期社会实践的个人总结!
2019/07/17 职场文书
Python用any()函数检查字符串中的字母以及如何使用all()函数
2022/04/14 Python