对Python 多线程统计所有csv文件的行数方法详解
作者：houyanhua1 发布时间：2021-09-09 04:56:44
标签：Python,多线程,csv,行数
如下所示：
#统计某文件夹下的所有csv文件的行数（多线程）
import threading
import csv
import os
class MyThreadLine(threading.Thread): #用于统计csv文件的行数的线程类
def __init__(self,path):
threading.Thread.__init__(self) #父类初始化
self.path=path #路径
self.line=-1 #统计行数
def run(self):
reader = csv.reader(open(self.path, "r")) # 读取csv文件
lines=0
for item in reader: # 读取每一行
lines+=1
self.line=lines #保存行数
print(self.getName(),self.line)
path="C:\\Users\\aa\\csv" #所有csv文件所在的文件夹
filelist=os.listdir(path) #存储了所有的csv文件名
threadlist=[] #线程列表
for filename in filelist:
newpath=path+"\\"+filename #代表绝对路径
mythd=MyThreadLine( newpath) #创建线程类对象
mythd.start() #线程开始干活
threadlist.append(mythd) #增加线程到线程列表
for mythd in threadlist: #遍历每一个线程
mythd.join() #等待所有线程干完活，再继续执行以下代码
linelist=[] #csv文件行数列表
for mythd in threadlist:
linelist.append(mythd.line)
print(linelist)
来源：https://blog.csdn.net/houyanhua1/article/details/78249189
0
投稿猜你喜欢
oracle排序后如何获取第一条数据场景想要获取下列sql的数据的第一条select NEXT_FOLLOWUP_DATE fr- python程序结构python“一切皆对象”，这是接触python听到最多的总结了。在python中最基层的单位应该就是对象了，对象需要靠
- 一般在卸载完数据库时，大家都希望能够将注册表信息完全删干净，下面就将教您彻底删除SQL Server注册表的方法，供您参考。在卸载SQL S
- 1、Case 子查询连接查询select * from score create database demo use demo create
- 一、新手常犯的错误在论坛看到很多帖子代码中都有一个共同的基本错误，字段类型错误。程序和数据库是紧紧相连的，数据库字段文本型或时间型的都使用单
- 前言这个只是使用面向对象的方法写的 构思和学生管理系统（JSON模块）是一样的file_manager.py""&quo
- 前言：在 Web 页面经常会有各种事件发生，事件发生后需要进行一些特定处理，即执行特定的函数或者语句。这就需要对事件进行监听，监听事件的常见
- 小编最近由于工作原因要用到python，一门新的知识需要接触，对于我来说难度还是很大的。python工程目录结构每次创建一个python工程
- <html><head><meta http-equiv="Content-T
- 如何在页面中实现对电子信箱的访问？emaile.htm<HTML><HEAD><META NAME=
- 在Python中可以通过几种方法调用C++的函数，这里介绍使用ctypes的方法。ctypes是Python自带的一个模块，能够直接载入C+
- 一、解析PDF（简历内推）应用场景：简历内推（解析内容：包括不限于姓名、邮箱、电话号码、学历等信息）输入：要解析的文件路径输出：需要解析的内
- 导读：分析时间序列数据的一种简单而有效的方法就是将时间序列数据可视化在一个图表上，这样我们就可以从中推断出某些假设。本文将以股价数据集为例，
- IWinter 是一个路由转控制器的 node 库，只解决一个问题：为了让使用者以更优雅的姿势进行路由的编写。支持在 Express 和 K
- 切换按钮是QPushButton的特殊模式。它是一个具有两种状态的按钮：按压和未按压。我们通过这两种状态之间的切换来修改其它内容。#!/us
- from win32com.client import DispatchEximport timeie=DispatchEx("I
- 很多文章都有提到关于使用phpExcel实现Excel数据的导入导出，大部分文章都差不多，或者就是转载的，都会出现一些问题，下面是本人研究p
- 闭包(closure)是函数式编程的重要的语法结构。函数式编程是一种编程范式 (而面向过程编程和面向对象编程也都是编程范式)。在面向过程编程
- 来源:Chinaasp 之所以翻译这篇文章，是因为目前关于CGI安全性的文章都是拿Perl作为例子，而专门介绍ASP，PHP或者JSP安全性
- 上一篇已经介绍了celery的基本知识，本篇以一个小项目为例，详细说明django框架如何集成celery进行开发。本系列文章的开发环境：w
