Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python使用shelve模块实现简单数据存储的方法
May 20 Python
Python抓取淘宝下拉框关键词的方法
Jul 08 Python
python里使用正则的findall函数的实例详解
Oct 19 Python
关于python2 csv写入空白行的问题
Jun 22 Python
python实现周期方波信号频谱图
Jul 21 Python
Pycharm配置远程调试的方法步骤
Dec 17 Python
python实现五子棋小游戏
Mar 25 Python
Pandas透视表(pivot_table)详解
Jul 22 Python
Python适配器模式代码实现解析
Aug 02 Python
python/Matplotlib绘制复变函数图像教程
Nov 21 Python
Python tkinter实现图片标注功能(完整代码)
Dec 08 Python
python学习之panda数据分析核心支持库
May 07 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
php下清空字符串中的HTML标签的代码
2010/09/06 PHP
兼容性比较好的PHP生成缩略图的代码
2011/01/12 PHP
PHP导出EXCEL快速开发指南--PHPEXCEL的使用详解
2013/06/03 PHP
PHP使用memcache缓存技术提高响应速度的方法
2014/12/26 PHP
PHP常见错误提示含义解释(实用!值得收藏)
2016/04/25 PHP
php 如何设置一个严格控制过期时间的session
2017/05/05 PHP
js利用与或运算符优先级实现if else条件判断表达式
2010/04/15 Javascript
jQuery.autocomplete 支持中文输入(firefox)修正方法
2011/03/10 Javascript
js jquery验证银行卡号信息正则学习
2013/01/21 Javascript
jquery遍历checkbox的注意事项说明
2014/02/21 Javascript
用html5 js实现点击一个按钮达到浏览器全屏效果
2014/05/28 Javascript
jquery简单实现带渐显效果的选项卡菜单代码
2015/09/01 Javascript
jquery dialog获取焦点的方法
2017/02/09 Javascript
jQuery中 bind的用法简单介绍
2017/02/13 Javascript
jQuery树插件zTree使用方法详解
2017/05/02 jQuery
简单实现JavaScript弹幕效果
2020/08/27 Javascript
详解nodejs异步I/O和事件循环
2017/06/07 NodeJs
Bootstrap提示框效果的实例代码
2017/07/12 Javascript
Angular实现较为复杂的表格过滤,删除功能示例
2017/12/23 Javascript
解决layui批量传值到后台操作时出现传值为空的问题
2019/09/28 Javascript
小程序点击图片实现png转jpg
2019/10/22 Javascript
返回上一个url并刷新界面的js代码
2020/09/12 Javascript
[00:10]DOTA2全国高校联赛速递
2018/05/30 DOTA
[45:06]完美世界DOTA2联赛PWL S2 Magma vs InkIce 第二场 11.28
2020/12/02 DOTA
Python常见加密模块用法分析【MD5,sha,crypt模块】
2017/05/24 Python
Pandas实现数据类型转换的一些小技巧汇总
2018/05/07 Python
Python判断以什么结尾以什么开头的实例
2018/10/27 Python
Python判断有效的数独算法示例
2019/02/23 Python
python logging 日志的级别调整方式
2020/02/21 Python
香奈儿美国官网:CHANEL美国
2020/05/20 全球购物
自考毕业生自我鉴定
2013/11/04 职场文书
档案接收函范文
2014/01/10 职场文书
安全教育观后感
2015/06/17 职场文书
创业计划书之个人工作室
2019/08/22 职场文书
小型企业的绩效考核制度模板
2019/11/21 职场文书
解决WINDOWS电脑开机后桌面没有任何图标
2022/04/09 数码科技