使用python读取txt文件的内容,并删除重复的行数方法


Posted in Python onApril 18, 2018

注意,本文代码是使用在txt文档上,同时txt文档中的内容每一行代表的是图片的名字。

#coding:utf-8 
import shutil 
readDir = "原文件绝对路经" 
writeDir = "写入文件的绝对路径" 
#txtDir = "/home/fuxueping/Desktop/1" 
lines_seen = set() 
outfile=open(writeDir,"w") 
f = open(readDir,"r") 
for line in f: 
  if line not in lines_seen: 
    outfile.write(line) 
    lines_seen.add(line) 
outfile.close() 
print "success"

最终结果在在写入文件内容中,没有重复内容。

以上这篇使用python读取txt文件的内容,并删除重复的行数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python登录QQ邮箱发信的实现代码
Feb 10 Python
python异步任务队列示例
Apr 01 Python
Python实现Windows上气泡提醒效果的方法
Jun 03 Python
python enumerate函数的使用方法总结
Nov 15 Python
解决python中用matplotlib画多幅图时出现图形部分重叠的问题
Jul 07 Python
Python实现的统计文章单词次数功能示例
Jul 08 Python
python操作gitlab API过程解析
Dec 27 Python
Pytorch 保存模型生成图片方式
Jan 10 Python
在Tensorflow中实现梯度下降法更新参数值
Jan 23 Python
Python pandas 列转行操作详解(类似hive中explode方法)
May 18 Python
python通过函数名调用函数的几种场景
Sep 23 Python
python中scipy.stats产生随机数实例讲解
Feb 19 Python
python对excel文档去重及求和的实例
Apr 18 #Python
Pandas之drop_duplicates:去除重复项方法
Apr 18 #Python
pandas 实现将重复表格去重,并重新转换为表格的方法
Apr 18 #Python
Python对多属性的重复数据去重实例
Apr 18 #Python
Python3实现的字典遍历操作详解
Apr 18 #Python
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
Apr 18 #Python
python 删除列表里所有空格项的方法总结
Apr 18 #Python
You might like
PHP获取一个字符串中间一部分字符的方法
2014/08/19 PHP
laravel 5异常错误:FatalErrorException in Handler.php line 38的解决
2017/10/12 PHP
php微信开发之图片回复功能
2018/06/14 PHP
pjblog中的UBBCode.js
2007/04/25 Javascript
Js如何判断客户端是PC还是手持设备简单分析
2012/11/22 Javascript
JQuery for与each性能比较分析
2013/05/14 Javascript
js左右弹性滚动对联广告代码分享
2014/02/19 Javascript
jquery操作checked属性以及disabled属性的多种方法
2014/06/20 Javascript
深入理解javascript构造函数和原型对象
2014/09/23 Javascript
node.js中的fs.readlink方法使用说明
2014/12/17 Javascript
Bootstrap滚动监听(Scrollspy)插件详解
2016/04/26 Javascript
AngularJS基础 ng-csp 指令详解
2016/08/01 Javascript
微信小程序实现留言板
2018/10/31 Javascript
js全屏事件fullscreenchange 实现全屏、退出全屏操作
2019/09/17 Javascript
Python Web服务器Tornado使用小结
2014/05/06 Python
介绍Python的Django框架中的QuerySets
2015/04/20 Python
Python设计模式编程中解释器模式的简单程序示例分享
2016/03/02 Python
浅谈Python数据类型之间的转换
2016/06/08 Python
Python构建XML树结构的方法示例
2017/06/30 Python
Python网络爬虫与信息提取(实例讲解)
2017/08/29 Python
Python实现Logger打印功能的方法详解
2017/09/01 Python
python matplotlib画图实例代码分享
2017/12/27 Python
python gdal安装与简单使用
2019/08/01 Python
tensorflow之获取tensor的shape作为max_pool的ksize实例
2020/01/04 Python
解决python3输入的坑——input()
2020/12/05 Python
图解CSS3制作圆环形进度条的实例教程
2016/05/26 HTML / CSS
西班牙英格列斯百货官网:El Corte Inglés
2016/09/25 全球购物
世界第一曲奇连锁店:Mrs. Fields Cookies
2017/02/04 全球购物
英国领先的露营和露营车品牌之一:OLPRO
2019/08/06 全球购物
Vivo俄罗斯官方在线商店:中国智能手机品牌
2019/10/04 全球购物
英国最大的在线快递公司之一:ParcelHero
2019/11/04 全球购物
护理自我鉴定范文
2013/10/06 职场文书
西安交大自主招生自荐信
2014/01/27 职场文书
学校创先争优活动总结
2014/08/28 职场文书
优质护理服务心得体会
2016/01/22 职场文书
mysql如何配置白名单访问
2021/06/30 MySQL