Плевать файл на несколько файлов

Question

У меня есть большой файл в следующем формате:

From fc2868d745defcc4deb0ebdce8fe8dac78b447ea Mon Sep 17 00:00:00 2001 
From: email address 
message content 

From 39a833c2f01030619629daa3b613e3985b2e4e7a Mon Sep 17 00:00:01 2001  
From: email address 
message content 

From 833c2f01030619629daa3b613e3985b2e4e7a427 Mon Sep 17 00:00:01 2001 
From: email address 
message content 

Я хотел бы, чтобы разбить файл на несколько файлов, так что первый файл содержит

From fc2868d745defcc4deb0ebdce8fe8dac78b447ea Mon Sep 17 00:00:00 2001 
    From: email address 
    message content 

Следующий файл содержит следующий раздел.

Ключ, который определяет следующий файл является «С [аз] [0-9]»

Таким образом, «Из космоса некоторые буквы/цифры»

содержание сообщений является несколько строк, до 1000

Любые идеи, как это сделать в bash?

Пример 3, содержащий сообщения: http://pastebin.com/xWmuzfRC

Answer 1

Может быть, вы можете использовать это регулярное выражение.

(From\s.*\n+From:\s+.*\n+.*\n) 

Смотрите этот пример: https://regex101.com/r/fJ2rF9/1

Answer 2

Вы можете использовать AWK:

awk '/^From [[:alnum:]]+/{if (fn) close (fn); fn = "file" ++i ".txt"} 
      {print > fn} END{close(fn)}' file 

Это создаст выходные файлы как file1.txt, file2.txt, file3.txt.

Answer 3

Следующая картина будет работать:

(^From.*\n)(From:.*\n)((?!From)[\s\S])*$ 

• Группа 1: матч все, что beggins с From, до конца текущей строки.
• Группа 2: сопоставьте все, что нищих From:, до конца текущей строки.
• Группа 3: Совсем все, включая разрывы строк, кроме From.

Answer 4

Aaaghh ... Оказывается, большой файл из мерзавца и могут быть разделены с git mailsplit :)

мерзавец mailsplit Разбивает файл MBox или Maildir в список файлов: «0001» " 0002 ".. в указанном каталоге, чтобы вы могли обрабатывать их дальше оттуда.

https://git-scm.com/docs/git-mailsplit

Answer 5

#script 20151110f.sh 
#input file: 20151110f.dat 
#usage bash 20151110f.sh 20151110f.dat 

inf=$1 # source file 
num=1 
while read -r line 
do 
    echo "$line" | grep -q "From [a-z0-9]" # check if a new message 
    if [ $? -eq 0 ] 
    then 
     file="file"${num}.dat 
     echo "$line" > $file 
     num=$((num + 1)) #inc so that next file name will be one higher 
    else 
     echo "$line" >> $file 
    fi 
done < "$inf"