найти дубликаты слов в двух файлах

Question

У меня есть два текстовых файла. Мне нужно проверить дубликаты слов внутри них. Есть ли способ более сжатый, чем этот код?

file1 = set(line.strip() for line in open('/home/user1/file1.txt')) 
file2 = set(line.strip() for line in open('/home/user1/file2.txt')) 

for line in file1 & file2: 
    if line: 
     print(line) 

Answer 1

Это одна строка короче и закрывает оба файла после использования:

with open('/home/user1/file1.txt') as file1, open('/home/user1/file2.txt') as file2: 
    for line in set(line.strip() for line in file1) & set(line.strip() for line in file2): 
     if line: 
      print(line) 

вариационной только один комплект:

with open('/home/user1/file1.txt') as file1, open('/home/user1/file2.txt') as file2: 
    for line in set(line.strip() for line in file1).intersection(line.strip() for line in 
                   file2): 
     if line: 
      print(line) 

Answer 2

Еще короче:

with open('/home/user/file1.txt') as file1, open('/home/user/file2.txt') as file2: 
    print "".join([word+"\n" for word in set(file1.read().split()) & set(file2.read().split())]) 

Answer 3

You может писать сжатый код, но что более важно Вам не нужно, чтобы создать два набора, вы можете использовать set.intersection, который позволит вашему коду работать для больших наборов данных и работать быстрее:

with open('/home/user1/file1.txt') as f1, open('/home/user1/file2.txt') as f2: 
    for line in set(map(str.rstrip,f2)).intersection(map(str.rstrip,f2))): 
     print(line) 

Для использования python2 itertools.imap:

from itertools import imap 
with open('/home/user1/file1.txt') as f1, open('/home/user1/file2.txt') as f2: 
    for line in set(imap(str.rstrip,f2)).intersection(imap(str.rstrip(f2))): 
     print(line) 

Вы создать один набор, который затем добавляется к итерации по итерируемому переданному, т. е. str.rstripped строк файла2, так как он создает два полных набора строк, а затем выполняет пересечение.