Как найти повторяющиеся строки в двух разных файлах? Unix

Question

С терминала unix мы можем использовать diff file1 file2, чтобы найти разницу между двумя файлами. Есть ли аналогичная команда, чтобы показать сходство в двух файлах? (Много труб допускаются при необходимости

Каждого файл содержит строку с струнным предложением, они сортируются и повторяющиеся строки удалены с sort file1 | uniq

file1:.. http://pastebin.com/taRcegVn

file2: http://pastebin.com/2fXeMrHQ

И на выходе должны выводиться строки, которые отображаются в обоих файлах.

output: http://pastebin.com/FnjXFshs

Я могу использовать Python, чтобы сделать это как таковой, но я думаю, что это слишком много, чтобы положить в терминал:

x = set([i.strip() for i in open('wn-rb.dic')]) 
y = set([i.strip() for i in open('wn-s.dic')]) 
z = x.intersection(y) 
outfile = open('reverse-diff.out') 
for i in z: 
    print>>outfile, i 

Answer 1

Как @tjameson упомянуто, что может быть решена в другом потоке. Просто хотел бы опубликовать еще одно решение: sort file1 file2 | awk 'dup[$0]++ == 1'

1. сослаться на awk guide, чтобы получить некоторые AWK основы, когда значение шаблон строки верно эта линия будет печататься

2. DUP [ $ 0] является хеш-таблицей, в которой каждый ключ является каждой строкой ввода, . Исходное значение равно 0 и увеличивается, как только эта строка возникает, когда происходит снова, значение должно быть 1, поэтому значение dup[$0]++ == 1 истинно. Затем эта строка печатается.

Обратите внимание, что это работает только в том случае, если в любом файле нет дубликатов, как указано в вопросе.

Answer 2

Если вы хотите, чтобы получить список повторяющихся линий, не прибегая к AWK, вы можете использовать -d flag to uniq:

sort file1 file2 | uniq -d