Python过滤txt文件内重复内容的方法


Posted in Python onOctober 21, 2018

Python过滤txt文件内重复内容,并将过滤后的内容保存到新的txt中

示例如下

原文件

Python过滤txt文件内重复内容的方法

处理之后的文件

Python过滤txt文件内重复内容的方法

直接上代码

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到结果

Python过滤txt文件内重复内容的方法

以上这篇Python过滤txt文件内重复内容的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python深入学习之上下文管理器
Aug 31 Python
简单介绍使用Python解析并修改XML文档的方法
Oct 15 Python
Python使用lxml模块和Requests模块抓取HTML页面的教程
May 16 Python
python rsa 加密解密
Mar 20 Python
python3 pandas 读取MySQL数据和插入的实例
Apr 20 Python
对python Tkinter Text的用法详解
Oct 11 Python
Python3数字求和的实例
Feb 19 Python
浅谈python之高阶函数和匿名函数
Mar 21 Python
Python爬虫图片懒加载技术 selenium和PhantomJS解析
Sep 18 Python
Python基于WordCloud制作词云图
Nov 29 Python
django框架auth模块用法实例详解
Dec 10 Python
Python环境管理virtualenv&virtualenvwrapper的配置详解
Jul 01 Python
python对html过滤处理的方法
Oct 21 #Python
一看就懂得Python的math模块
Oct 21 #Python
python中将正则过滤的内容输出写入到文件中的实例
Oct 21 #Python
Python用5行代码写一个自定义简单二维码
Oct 21 #Python
python实现将文件夹下面的不是以py文件结尾的文件都过滤掉的方法
Oct 21 #Python
Python定时发送消息的脚本:每天跟你女朋友说晚安
Oct 21 #Python
用Django写天气预报查询网站
Oct 21 #Python
You might like
利用discuz实现PHP大文件上传应用实例代码
2008/11/14 PHP
php定时计划任务的实现方法详解
2013/06/06 PHP
PHP中的替代语法简介
2014/08/22 PHP
PHP中define() 与 const定义常量的区别详解
2019/06/25 PHP
IE不出现Flash激活框的小发现的js实现方法
2007/09/07 Javascript
基于jquery的自定义鼠标提示效果 jquery.toolTip
2010/11/14 Javascript
解决JQeury显示内容没有边距内容紧挨着浏览器边线
2013/12/20 Javascript
js验证身份证号有效性并提示对应信息
2015/10/19 Javascript
js针对ip地址、子网掩码、网关的逻辑性判断
2016/01/06 Javascript
jQuery事件绑定用法详解
2016/09/08 Javascript
jquery 正整数数字校验正则表达式
2017/01/10 Javascript
JavaScript日期对象(Date)基本用法示例
2017/01/18 Javascript
js实现漫天星星效果
2017/01/19 Javascript
详解如何使用webpack打包Vue工程
2017/05/27 Javascript
Node.js开发第三方微信公众平台
2017/06/05 Javascript
node.js的exports、module.exports与ES6的export、export default深入详解
2017/10/26 Javascript
基于js中style.width与offsetWidth的区别(详解)
2017/11/12 Javascript
js+html5实现手机九宫格密码解锁功能
2018/07/30 Javascript
p5.js临摹旋转爱心
2019/10/23 Javascript
基于jQuery实现挂号平台首页源码
2020/01/06 jQuery
[43:32]Winstrike vs VGJ.S 2018国际邀请赛淘汰赛BO3 第一场 8.23
2018/08/24 DOTA
python使用线程封装的一个简单定时器类实例
2015/05/16 Python
关于Python中浮点数精度处理的技巧总结
2017/08/10 Python
python利用高阶函数实现剪枝函数
2018/03/20 Python
Python中pymysql 模块的使用详解
2019/08/12 Python
Python3实现二叉树的最大深度
2019/09/30 Python
python编写俄罗斯方块
2020/03/13 Python
python给视频添加背景音乐并改变音量的具体方法
2020/07/19 Python
Django扫码抽奖平台的配置过程详解
2021/01/14 Python
家居装修公司创业计划书范文
2014/03/20 职场文书
总经理任命书范本
2014/06/05 职场文书
促销活动总结模板
2014/07/01 职场文书
2014标准社保办理委托书
2014/10/06 职场文书
胡雪岩故居导游词
2015/02/06 职场文书
pytorch--之halfTensor的使用详解
2021/05/24 Python
VUE中的v-if与v-show区别介绍
2022/03/13 Vue.js