python解决pandas处理缺失值为空字符串的问题
作者：渐行渐远silence 发布时间：2021-10-21 09:01:38
标签：python,pandas,空,字符串
踩坑记录：
用pandas来做csv的缺失值处理时候发现奇怪BUG，就是excel打开csv文件，明明有的格子没有任何东西，当然，我就想到用pandas的dropna()或者fillna()来处理缺失值。
但是pandas读取csv文件后发现那个空的地方isnull()竟然是false，就是说那个地方有东西。。。
后来经过排查发现看似什么都没有的地方有空字符串，故pandas认为那儿不是缺失值，所以就不能用dropna()或者fillna()来处理。
解决思路：先用正则将空格匹配出来，然后全部替换为NULL，再在用pandas读取csv时候指定 read_csv（na_values='NULL'）就是将NULL认为是nan处理，接下来就可以用dropna()或者fillna()来处理了
来源：https://blog.csdn.net/silence2015/article/details/65643125
0
投稿猜你喜欢
- 本月的每月挑战会主题是NLP，我们会在本文帮你开启一种可能：使用pandas和python的自然语言工具包分析你Gmail邮箱中的内容。NL
- 很神奇的一个晚上，居然在以前老同事的群里跟同事讨论起CSS的东西来了，不过很意外的还是有收获。在IE中常常会碰到如果将容器定位后，出现容器内
引言 性能是一个特征。您必须预先设计性能，否则您以后就得重写应用程序。就是说，有哪些好的策略可使 Active Server Pages (- 前言JavaScript语言中有一个非常重要又难以掌握，近似神话的概念-闭包。对于有一点JavaScript使用经验但从未真正理解闭包概念的
- 本文为大家分享了mysql 5.7.17 winx64解压版安装配置方法，供大家参考，具体内容如下一、下载下载地址二、配置1. 解压下载的m
- 本文实例讲述了Python按行读取文件的实现方法。分享给大家供大家参考，具体如下：小文件：#coding=utf-8#author: wal
- 前言这是俺写的第一篇关于python的博客，分享一下我所整合的python中的随机数函数，就当作是自己的一个笔记，也可以供像我一样的pyth
- 分组查询 group bygroup by 属性名 [having 条件表达式][ with rollup]“属性名 ”指按照该字段值进行分
- Flask Web开发实战学习笔记Flask简介Flask是使用Python编写的Web微框架。Web框架可以让我们不用关 心底层的请求响应
- 数据库迁移(A -> B)，需要把用户也迁移过去，而用户表（mysql.user）有上百个用户。有2种方法进行快速迁移：1，在同版本的
- django restframework 导入excel内容，可以查看另外一篇文章一、基础环境web架构：前后端分离，前端使用vue，后端使
- innerHTML 属性的使用非常流行，因为他提供了简单的方法完全替代一个 HTML 元素的内容。另外一个方法是使用 DOM Level 2
- 一、安装matplotlib1）由于已安装anaconda，可直接打开anaconda prompt，再用命令pip install mat
- 需要下载某网站的视频，chrome浏览器按F12打开开发者模式，发现视频链接是以"blob:http"开头的链接，打开这
- 我相信站长们做网站的最终目的还是想要获得收入的，我想象站长们大部分的都做Google的联盟的，我相信站长中大部分的人都有考虑过做英文站的，但
- 目录时间戳相减装饰器timeit模块重复调用 timeit()cProfile性能分析工具时间戳相减在代码执行前后各记录一个时间点，两个时间
- 我们给大家详细分析了一下在JS调试的时候经常用到的断点调试，并把经验和技巧做了总结，以下是全部内容：1.断点调试是啥？难不难？断点调试其实并
- mysql 模糊查询 concat()concat() 函数，是用来连接字符串。精确查询： select * from user where
- 个人理解：动态路由不同于常见的静态路由，可以根据不同的「因素」而改变站点路由列表。常见的动态路由大都是用来实现：多用户权限系统不同用户展示不
- 本文实例讲述了Selenium基本用法。分享给大家供大家参考，具体如下：Selenium是一个用于Web应用程序测试的工具。Selenium
