Использование Sed/Awk для извлечения первых трех уникальных экземпляров строки

Question

У меня есть список с 20000 пробниками, есть ли способ извлечь первые три строки/вхождения для каждого зонда с помощью sed/awk?

Example of dataset: 
    Probe1 A GTTAGAGGAGGTGGAAGAGC 
    Probe1 B CTGAGGTCGGGACGGAGCAC 
    Probe1 C GATGTAGGCGGTTGGCGTGG 
    Probe1 D GTTGGCGAAGTCACATCTAG 
    Probe1 E CATGTCGCCGACTCCGTCGA 
    Probe1 F GTGATGTTCTGAGTACATAG 

    Probe3 A GATTGTAGGTTTCCTGCCAG 
    Probe3 L ACCCAGCCAGGGGAAAACCA 
    Probe3 Z GGAGATGTAGGCGGTTGGCG 
    Probe3 Y GGAGATGTAGGCCTTAAAAA 
    Probe3 D GATTGTAGGGGTCCTGCCAG 

Желаемый результат:

Probe1 A GTTAGAGGAGGTGGAAGAGC 
Probe1 B CTGAGGTCGGGACGGAGCAC 
Probe1 C GATGTAGGCGGTTGGCGTGG 
Probe3 A GATTGTAGGTTTCCTGCCAG 
Probe3 L ACCCAGCCAGGGGAAAACCA 
Probe3 Z GGAGATGTAGGCGGTTGGCG 

Answer 1

awk на помощь!

$ awk '++a[$1]<4' file 

удалить пустые строки

$ awk '++a[$1]<4 && NF' file 

Answer 2

Нет необходимости использовать СЭД или AWK (если вы не хотите использовать Python). Если я не ошибаюсь ваш вопрос, это должно сделать это:

probes = [ 
"""Probe1 A GTTAGAGGAGGTGGAAGAGC 
Probe1 B CTGAGGTCGGGACGGAGCAC 
Probe1 C GATGTAGGCGGTTGGCGTGG 
Probe1 D GTTGGCGAAGTCACATCTAG 
Probe1 E CATGTCGCCGACTCCGTCGA 
Probe1 F GTGATGTTCTGAGTACATAG""", 
"""Probe3 A GATTGTAGGTTTCCTGCCAG 
Probe3 L ACCCAGCCAGGGGAAAACCA 
Probe3 Z GGAGATGTAGGCGGTTGGCG 
Probe3 Y GGAGATGTAGGCCTTAAAAA 
Probe3 D GATTGTAGGGGTCCTGCCAG"""] 

for probe in probes: 
    for i, line in enumerate(probe.split("\n")): 
     print(line) 
     if i >= 2: 
      break