对Python 多线程统计所有csv文件的行数方法详解
作者：houyanhua1 发布时间：2021-09-09 04:56:44
标签：Python,多线程,csv,行数
如下所示：
#统计某文件夹下的所有csv文件的行数（多线程）
import threading
import csv
import os
class MyThreadLine(threading.Thread): #用于统计csv文件的行数的线程类
def __init__(self,path):
threading.Thread.__init__(self) #父类初始化
self.path=path #路径
self.line=-1 #统计行数
def run(self):
reader = csv.reader(open(self.path, "r")) # 读取csv文件
lines=0
for item in reader: # 读取每一行
lines+=1
self.line=lines #保存行数
print(self.getName(),self.line)
path="C:\\Users\\aa\\csv" #所有csv文件所在的文件夹
filelist=os.listdir(path) #存储了所有的csv文件名
threadlist=[] #线程列表
for filename in filelist:
newpath=path+"\\"+filename #代表绝对路径
mythd=MyThreadLine( newpath) #创建线程类对象
mythd.start() #线程开始干活
threadlist.append(mythd) #增加线程到线程列表
for mythd in threadlist: #遍历每一个线程
mythd.join() #等待所有线程干完活，再继续执行以下代码
linelist=[] #csv文件行数列表
for mythd in threadlist:
linelist.append(mythd.line)
print(linelist)
来源：https://blog.csdn.net/houyanhua1/article/details/78249189
0
投稿猜你喜欢
内容摘要：在本人上一篇教程《彻底弄懂CSS盒子模式五(定位强化练习) 》有讲到一个很酷的链接面板提示的实例制作，那时主要是用到di- 前言for...in 是Python程序员使用最多的语句，for 循环用于迭代容器对象中的元素，这些对象可以是列表、元组、字典、集合、文件，
- 由于数据库中的每张表中的字段名不一样，所以在写后台程序的时候，通常会写多个页面，对应不同的表。这里介绍一个函数，适合所有的表，不需要再为每一
- ClickHouse是近年来备受关注的开源列式数据库（DBMS），主要用于数据联机分析（OLAP）领域，于2016年开源。目前国内社区火热，
- JavaScript 循环中，i++ 与 i– 那个比较快？相信有不少朋友看过相关的讨论文章，比如这篇。文章解释了开启优化选项后，i– 的
- 用途:将UTF-8编码汉字转换为GB2312码,兼容英文和数字版权:虽说是原创，其实也参考了別人的部分算法asp源代码：<％
- 图片的间隙Ｑ：我有一张大图片，把它切割后在Dreamweaver中进行拼接，可是总是有间隙，不知为什么？Ａ：不知你是否把表格的边距、间距和边
- 近日，有朋友一直打听flash连结服务器相关的知识，搞得我忧心重重，重点是自己也忘记了，大部分Flash的相关开发都是两年前的事，而且fla
- 代码如下所示：$num = 10.4567; //第一种：利用round()对浮点数进行四舍五入 &n
- 当你的查询相对简单的时候，每次从头开始创建SQL语句也不费什么工夫，不过，复杂的查询就不同了，每次都从头来会产生很多开发错误。因此，一旦让S
- sql语句查询数据库中的表名/列名/主键/自动增长值 ----查询数据库中用户创建的表 ----jsj01 为数据库名 select nam
- 1、跳过迭代对象的开头string_from_file = """ // Wooden: ...
- Linux环境MySQL服务器级优化讲解 摘要：本节简单介绍了如何在服务器级优化数据库的性能
- 一、前言今天我们将用Python来创建一个属于自己的音乐播放器。为此，我们将使用三个软件包：Tkinter：用于UIPygame：播放音乐o
- 腾讯“月捐计划”倡导爱心人士，通过每月小额捐款的形式，长期关注和支持公益项目。并和亿万爱心网友一起，每人每月1份爱，点滴付出，汇成爱海，形成
- 让长字符自动换行 (比如 URL 和 Email地址) 目的：让很长的字符串，能自动换行，但是不要把短的单词从中间断开。方法如下：<s
- 分页，就是按照某种规则显示分组数据集，但是在SQL Server 中，分页并不是十分容易就能够实现。在过去，开发人员通常需要自己编写程序，使
- <!--#include file="Include/Conn.asp"--><％If(Request
- 近段时间由于修改一个ASP程序(有SQL注入漏洞)，在网上找了很多相关的一些防范办法，都不近人意，所以我将现在网上的一些方法综合改良了一下，
- 一、包的导入Golang 当导入多个包时，一般按照字母顺序排列包名称，像Goland 等IDE 会在保存文件时自动完成这个动作。Golang
