Python判断两个文件是否相同与两个文本进行相同项筛选的方法_Python

Python判断两个文件是否相同与两个文本进行相同项筛选的方法

2021-06-03 00:3636155051 Python

今天小编就为大家分享一篇关于Python判断两个文件是否相同与两个文本进行相同项筛选的方法，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧

python判断两个文件是否相同

				?

									import hashlib

									def getHash(f):

									  line=f.readline()

									  hash=hashlib.md5()

									  while(line):

									    hash.update(line)

									    line=f.readline()

									  return hash.hexdigest()

									def IsHashEqual(f1,f2):

									  str1=getHash(f1)

									  str2=getHash(f2)

									  return str1==str2

									if __name__ == '__main__':

									  f1=open("D:/2.iso","rb")

									  f2=open("E:/wenjian/1.iso","rb")

									  print IsHashEqual(f1,f2)

计算2个文件的MD5值，大文件计算较慢

python对两个文本进行相同项筛选

				?

									import os

									import os.path as osp

									def filter(path):

									  file_path = osp.join(path, 'index.txt')

									  if osp.exists(file_path):

									    return file_path

									  index_file = open(file_path, 'a+')

									  if not os.path.isdir(path):  #判断path是否为路径 

									    return

									  for root, dirs, list in os.walk(path):

									    for i in list: 

									      dir = os.path.join(root, i)  #将分离的部分组成一个路径名 

									      #if os.path.getsize(dir) < 60000:  #获取文件大小 

									        #os.remove(dir)       #删除文件 

									      print (i)

									      index_file.write(i+'\n')

									  index_file.close()    

									def compare(path):

									  file=osp.join(path, 'label.txt')

									  file_path = osp.join(path, 'index.txt')

									  with open(file_path, 'r') as file1:

									     with open(file, 'r') as file2:

									       same = set(file1).intersection(file2)

									  same.discard('\n')

									  with open('some_output_file.txt', 'w') as file_out:

									     for line in same:

									       file_out.write(line)

									  file_out.close()

									filter(r'D:\Desktop\jiaoben\ci')

									compare(r'D:\Desktop\jiaoben\ci')