unique(Python)

*文件多列整体去冗余

#coding:utf-8

outfile=open('/linuxdata4/panqi/XXX/filter_0_S_A_E_dup.txt', 'w')
f = open('/linuxdata4/panqi/XXX/filter_0_S_A_E.bed','r') 
lines_seen = set()  # Build an unordered collection of unique elements. 
for line in f:
    line = line.strip('\n')
    if line not in lines_seen:
        outfile.write(line+ '\n')
        lines_seen.add(line)
©著作权归作者所有,转载或内容合作请联系作者
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。

推荐阅读更多精彩内容