使用python读取txt文件的内容,并删除重复的行数方法


Posted in Python onApril 18, 2018

注意,本文代码是使用在txt文档上,同时txt文档中的内容每一行代表的是图片的名字。

#coding:utf-8 
import shutil 
readDir = "原文件绝对路经" 
writeDir = "写入文件的绝对路径" 
#txtDir = "/home/fuxueping/Desktop/1" 
lines_seen = set() 
outfile=open(writeDir,"w") 
f = open(readDir,"r") 
for line in f: 
  if line not in lines_seen: 
    outfile.write(line) 
    lines_seen.add(line) 
outfile.close() 
print "success"

最终结果在在写入文件内容中,没有重复内容。

以上这篇使用python读取txt文件的内容,并删除重复的行数方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python中文分词实现方法(安装pymmseg)
Jun 14 Python
Python安装第三方库及常见问题处理方法汇总
Sep 13 Python
Tornado 多进程实现分析详解
Jan 12 Python
对python csv模块配置分隔符和引用符详解
Dec 12 Python
理想高通滤波实现Python opencv示例
Jan 30 Python
python绘制漏斗图步骤详解
Mar 04 Python
Django 中自定义 Admin 样式与功能的实现方法
Jul 04 Python
Python函数生成器原理及使用详解
Mar 12 Python
解决运行django程序出错问题 'str'object has no attribute'_meta'
Jul 15 Python
python 获取字典键值对的实现
Nov 12 Python
解决pycharm导入numpy包的和使用时报错:RuntimeError: The current Numpy installation (‘D:\\python3.6\\lib\\site-packa的问题
Dec 08 Python
详解java调用python的几种用法(看这篇就够了)
Dec 10 Python
python对excel文档去重及求和的实例
Apr 18 #Python
Pandas之drop_duplicates:去除重复项方法
Apr 18 #Python
pandas 实现将重复表格去重,并重新转换为表格的方法
Apr 18 #Python
Python对多属性的重复数据去重实例
Apr 18 #Python
Python3实现的字典遍历操作详解
Apr 18 #Python
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
Apr 18 #Python
python 删除列表里所有空格项的方法总结
Apr 18 #Python
You might like
PHP生成便于打印的网页
2006/10/09 PHP
thinkphp分页实现效果
2016/10/13 PHP
PHP explode()函数用法讲解
2019/02/15 PHP
Dojo之路:如何利用Dojo实现Drag and Drop效果
2007/04/10 Javascript
Js 刷新框架页的代码
2010/04/13 Javascript
动态加载图片路径 保持JavaScript控件的相对独立性
2010/09/06 Javascript
jquery删除指定子元素代码实例
2015/01/13 Javascript
JS+CSS3实现超炫的散列画廊特效
2016/07/16 Javascript
html、css和jquery相结合实现简单的进度条效果实例代码
2016/10/24 Javascript
Angularjs中的ui-bootstrap的使用教程
2017/02/19 Javascript
Vue.js组件通信的几种姿势
2017/10/23 Javascript
node 利用进程通信实现Cluster共享内存
2017/10/27 Javascript
javascript与PHP动态往类中添加方法对比
2018/03/21 Javascript
详解Puppeteer前端自动化测试实践
2019/02/21 Javascript
详解微信小程序-扫一扫 wx.scanCode() 扫码大变身
2019/04/30 Javascript
vue用BMap百度地图实现即时搜索功能
2019/09/26 Javascript
js实现弹幕飞机效果
2020/08/27 Javascript
vue使用lodop打印控件实现浏览器兼容打印的方法
2021/02/07 Vue.js
Python下Fabric的简单部署方法
2015/07/14 Python
Python的爬虫程序编写框架Scrapy入门学习教程
2016/07/02 Python
利用Python为iOS10生成图标和截屏
2016/09/24 Python
Python对HTML转义字符进行反转义的实现方法
2019/04/28 Python
sklearn-SVC实现与类参数详解
2019/12/10 Python
Django后端按照日期查询的方法教程
2021/02/28 Python
ShellScript面试题一则-ShellScript编程
2014/06/24 面试题
CSS代码检查工具stylelint的使用方法详解
2021/03/27 HTML / CSS
考试诚信承诺书
2014/05/23 职场文书
学校个人对照检查材料
2014/08/26 职场文书
简单租房协议书(范本)
2014/10/13 职场文书
公务员个人考察材料
2014/12/23 职场文书
医务人员医德考评自我评价
2015/03/03 职场文书
组织委员竞选稿
2015/11/21 职场文书
2016消防宣传标语口号
2015/12/26 职场文书
导游词之清晏园
2019/11/22 职场文书
Python合并多张图片成PDF
2021/06/09 Python
vue配置型表格基于el-table拓展之table-plus组件
2022/04/12 Vue.js