Python使用pandas处理CSV文件的实例讲解
作者：CosetteQi 发布时间：2021-01-31 18:23:37
标签：pandas,CSV,Python
Python中有许多方便的库可以用来进行数据处理，尤其是Numpy和Pandas,再搭配matplot画图专用模块，功能十分强大。
CSV（Comma-Separated Values）格式的文件是指以纯文本形式存储的表格数据，这意味着不能简单的使用Excel表格工具进行处理，而且Excel表格处理的数据量十分有限，而使用Pandas来处理数据量巨大的CSV文件就容易的多了。
我用到的是自己用其他硬件工具抓取得数据，硬件环境是在Linux平台上搭建的，当时数据是在运行脚本后直接输出在terminal里的，数据量十分庞大，为了保存获得的数据，在Linux下使用了数据流重定向，把数据全部保存到了文本文件中，形成了一个本地csv文件。
Pandas读取本地CSV文件并设置Dataframe(数据格式)
import pandas as pd
import numpy as np
df=pd.read_csv('filename',header=None,sep=' ') #filename可以直接从盘符开始，标明每一级的文件夹直到csv文件，header=None表示头部为空，sep=' '表示数据间使用空格作为分隔符，如果分隔符是逗号，只需换成 ‘，'即可。
print df.head()
print df.tail()
#作为示例，输出CSV文件的前5行和最后5行，这是pandas默认的输出5行，可以根据需要自己设定输出几行的值
数据读取示例
图片中显示了我本地数据的前5行与最后5行，最前面一列没有标号的是行号，数据一共有13列，标号从0到12，一行显示不完全，在第9列以后换了行，并且用反斜杠“\”标注了出来。
2017年4月28日更新
使用pandas直接读取本地的csv文件后，csv文件的列索引默认为从0开始的数字，重定义列索引的语句如下：
import pandas as pd
import numpy as np
df=pd.read_csv('filename',header=None,sep=' ',names=["week",'month','date','time','year','name1','freq1','name2','freq2','name3','data1','name4','data2'])
print df
此时打印出的文件信息如下，列索引已经被重命名：
来源：https://blog.csdn.net/atnanyang/article/details/70832257
0
投稿猜你喜欢
前言一般而言，新的 centos 7.x 中自带的 python 都是 2.x 的版本。对于我们运行 python 软件支持并不友好，所以需- 1、 在sublime text的官网下载，是适合自己系统的版本。官网地址：https://www.sublimetext.com/32、安
- fixtures调用其他fixtures及fixture复用性 pytest最大的优点之一就是它非常灵活。它可以将复杂的测试需求简
- 方法一：torch.nn.DataParallel1. 原理如下图所示：小朋友一个人做4份作业，假设1份需要60min，共需要240min。
- 引言在前端开发的工作当中，使用 npm run dev 的命令启动本地开发环境，是再正常不过的事了。那么，当输入完类似 npm run xx
- 1.random.random():会随机生成0-1之间的小数例如：2.random.uniform(min,max):会随机生成 min
- 今天看到几个关于pygame模块的博客和视频，感觉非常有趣，这里照猫画虎写了一个贪吃蛇小游戏，目前还有待完善，但是基本游戏功能已经实现，下面
- 笔者remove TensorFlow总共四次。 reinstall anaconda 三次。安装技巧可以根据这个博主的文章进行安装。htt
- XML被设计用来描述数据，其焦点是数据的内容。HTML被设计用来显示数据，其焦点是数据的外观。
- 函数input()的工作原理函数input()让程序暂停运行，等待用户输入一些文本。获取用户输入后，Python将其存储在一个变量中，以方便
- 前言随着微信的普及，越来越多的人开始使用微信。微信渐渐从一款单纯的社交软件转变成了一个生活方式，人们的日常沟通需要微信，工作交流也需要微信。
- 分享一下刚遇到的一个小问题，我有一段类似于这样的python代码：# coding: utf-8class A(object):
- 这个是JS控制图片滚动的效果，当鼠标结果新闻标题时开始滚动到对应的图片，可以作为图片新闻。效果图：<!DOCTYPE HTML PUB
- 1.前言pyecharts 是一个用于生成 Echarts 图表的类库。Echarts 是百度开源的一个数据可视化 JS 库。用 Echar
- <'％ '************************************************
- 本文实例为大家分享了python感知机实现的具体代码，供大家参考，具体内容如下一、实现例子李航《统计学方法》p29 例2.1正例：x1=(3
- python 如何实现Excel 的Vlookup功能1、Excel 中VLOOKUP具体步骤Excel 中的VLOOKUP使用说明采用下面
- 【导语】：对自己写的冗长代码，想重构但又无思路？小编整理了系列介绍python代码重构优化的方法，助你一臂之力。编写干净的 Pythonic
- 前言：在网络时代，图片已经成为了我们生活中不可或缺的一部分。随着各种社交媒体的兴起，我们可以在网上看到越来越多的图片，但是如何从这些图片中获
- 背景：由于最近公司项目好像有点受不住并发压力了，优化迫在眉睫。由于当前系统是单数据库系统原因，能优化的地方也尽力优化了但是数据库瓶颈还是严重
