使用python读取txt文件的内容,并删除重复的行数方法
作者：猫猫与橙子 发布时间：2022-05-08 19:41:56
标签：python,txt,删除,重复,行数
注意，本文代码是使用在txt文档上，同时txt文档中的内容每一行代表的是图片的名字。
#coding:utf-8
import shutil
readDir = "原文件绝对路经"
writeDir = "写入文件的绝对路径"
#txtDir = "/home/fuxueping/Desktop/１"
lines_seen = set()
outfile=open(writeDir,"w")
f = open(readDir,"r")
for line in f:
if line not in lines_seen:
outfile.write(line)
lines_seen.add(line)
outfile.close()
print "success"
最终结果在在写入文件内容中，没有重复内容。
来源：https://blog.csdn.net/qq_22764813/article/details/73187473
0
投稿猜你喜欢
本文实例讲述了Python队列RabbitMQ 使用方法。分享给大家供大家参考，具体如下：目前的exchange的路由策略是：每个需要队列的- lighttpd (http://www.djangoproject.com/r/lighttpd/) 是一个轻量级的Web服务器，通常被用
- 官方文档https://developers.weixin.qq.com/miniprogram/dev/devtools/download
- 一 前言 提出这个问题，是因为在工作中发现 mysql 中的 user 表的 id 默认
- 题目描述原题链接 :35. 搜索插入位置 - 力扣（LeetCode） (leetcode-cn.com)给定一个排序数组和一个目标值，在数
- 前言最近使用Python解析IDX文件格式的MNIST数据集，需要对二进制文件进行读取操作，其中我使用的是struct模块。查了网上挺多教程
- 本文实例讲述了Python3.6基于正则实现的计算器。分享给大家供大家参考，具体如下：# -*- coding:utf-8 -*-#!pyt
- 在项目开发中，异常处理是不可或缺的。异常处理帮助人们debug，通过更加丰富的信息，让人们更容易找到bug的所在。异常处理还可以提高程序的容
- 前言学前端最基本的登录页面肯定要会写，那登录页面里面的密码框的功能设计就需要好好打磨，主要功能有显示密码明文，密码检测信息提示等等，那么本篇
- 水球图水球图首先是动态的效果，像水流一样波动，所以看起来比较的舒服，一般用于业务里面的完成率，其实和之前的仪表盘有点类似，但是我个人绝对水球
- 本文的目标是将表1论文及出版物与表2出版物及其指标进行匹配。利用pandas的merge函数实现表的左外连接。左外连接即左表的外连接，左表保
- 介绍对于绘制某些类型的数据来说，瀑布图是一种十分有用的工具。不足为奇的是，我们可以使用Pandas和matplotlib创建一个可重复的瀑布
- 操作数据库时候难免会因为“大意”而误操作，需要快速恢复的话通过备份来恢复是不太可能的，因为需要还原和binlog差来恢复，等不了，很费时。这
- 前言大家都知道Web运维总要关注相关域名的实时2xx/s、4xx/s、5xx/s、响应时间、带宽等这些指标，之前的日志是五分钟一分割，简单的
- 这篇文章主要介绍了python如何使用socketserver模块实现并发聊天,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定
- 一、下载instant client1.附链接：http://www.oracle.com/technetwork/topics/winx6
- GeoJson的简要介绍GeoJson是用json的语法表达和存储地理数据，可以说是json的子集。GeoJson以键值对的形式保存原有对象
- 本文实例讲述了python实现通过队列完成进程间的多任务功能。分享给大家供大家参考，具体如下：1.通过队列完成进程间的多任务import m
- Logminer是每个Dba都应熟悉的工具，当一天由于用户的误操作你需要做不完全的恢复时，由于你无法确定这个操作是哪个时间做的，所以这对你的
- 本文实例为大家分享了mysql5.7安装图文教程供大家参考，具体内容如下1.在官网下载解压缩版2.解压后配置默认文件新建个my.ini（可以
