利用python在大量数据文件下删除某一行的例子
作者：cm940114 发布时间：2023-08-24 09:15:22
标签：python,修改,文件,某行
python修改大数据文件时，如果全加载到内存中，可能会导致内存溢出。因此可借用如下方法，将分件分段读取修改。
with open('file.txt', 'r') as old_file:
with open('file.txt', 'r+') as new_file:
current_line = 0
# 定位到需要删除的行
while current_line < (3 - 1): #(del_line - 1)
old_file.readline()
current_line += 1
# 当前光标在被删除行的行首，记录该位置
seek_point = old_file.tell()
# 设置光标位置
new_file.seek(seek_point, 0)
# 读需要删除的行，光标移到下一行行首
old_file.readline()
# 被删除行的下一行读给 next_line
next_line = old_file.readline()
# 连续覆盖剩余行，后面所有行上移一行
while next_line:
new_file.write(next_line)
next_line = old_file.readline()
# 写完最后一行后截断文件，因为删除操作，文件整体少了一行，原文件最后一行需要去掉
new_file.truncate()
注：truncate（）函数括号可以加数字，表示删除数字之后的字符串，如果不加 就从当前光标处开始截断删除
来源：https://blog.csdn.net/cm940114/article/details/80086628
0
投稿猜你喜欢
- SHA (Secure Hash Algorithm，译作安全散列算法) 是美国国家安全局 (NSA) 设计，美国国家标准与技术研
（1）饼图（pie），即在一个圆圈内分成几块，显示不同数据系列的占比大小，这也是我们在日常数据的图形展示中最常用的图形之一。在python中- 俄罗斯方块是俄罗斯人发明的一款休闲类的小游戏，这款小游戏可以说是很多人童年的主打电子游戏了，本文我们使用 Python 来实现这款小游戏。游
- 本文中介绍了一个MySQL的存储过程，其中涉及Cursor的使用，示例如下：CREATE PROCEDURE `justifyGroupNu
- 本文实例讲述了Python使用微信SDK实现的微信支付功能。分享给大家供大家参考，具体如下：最近一段时间一直在搞微信平台开发，v3.37版本
- 一、简介提取图片的边缘信息是底层数字图像处理的基本任务之一。边缘信息对进一步提取高层语义信息有很大的影响。大部分边缘检测算法都是上个世纪的了
- 根据TIOBE 编程语言排行榜前20的语言分享相关图书（部分空缺）。在正式介绍编程语言排行之前，你敢不敢先挑战一下自己的编程技能？！测试下自
- 假设某宝为鼓励大家双12买买买，奖励双十一那天订单最多的两位用户：分别是用户1：“剁手皇帝陈哈哈” 和 用户2：“触手怪刘大莉” 一人一万元
- 1、myisamchk 使用 myisamchk 必须暂时停止 MySQL 服务器。例如，我们要检修 discuz 数据库。执行以下操作：
- 想查找mac下python的site-packages目录，如果用网上搜的安装目录之类的去找，进去每一层很多都是软链接形式存在，比较浪费时间
- 在用到编辑器时，就会碰到一点，那就是标签的闭合问题，这个问题非常严峻，因为这可能会导致网页显示的整体样式受到破坏。这最近在PJ的functi
- 导航标签彼此互斥、完全穷尽。导航标签其实就是一种文字表达形式，我们用标签来代表网站上的各种分类信息。比如“联系我们”这个标签，代表的内容通常
- 概述：前段时间在跟其他公司DBA交流时谈到了mysql跟PG之间在多表关联查询上的一些区别，相比之下mysql只有一种表连接类型:嵌套循环连
- 如果你是一位ASP爱好者，你一定想过ASP的执行效率如何？大家都知道ASP效率和CGI的比，在访问量少的时候，它们是不相上下的，有时可能CG
- Matplotlib官网 如果想了解更多可查看官网。import numpy as np import matplotlib.py
- setTimeout() 方法用于在指定的毫秒数后调用函数或计算表达式。语法:setTimeout(code,millisec)参数：cod
- 有关pygal的安装，大家可以参阅《pip和pygal的安装实例教程》。直方图：直方图是一个特殊的条，它可以取3个数值：纵坐标高度，横坐标开
- 近日在月影的blog上找到一段代码。看了老半天没明白什么意思，倍受打击！不死心，于是仔细分析思考了好几次，才明白过来这段函数的意义。js果然
- iframe的背景颜色在IE下为window的当前窗口颜色（默认白色，可以在显示外观处对其进行设置），这导致在大幅背景上插入iframe时，
- 以前提取这些文件用的是一同事些的批处理文件；用起来不怎么顺手，刚好最近在学些python，所有就自己动手写了一个python提取文件的小程序
