Как получить полную копию файла дампа, пока он еще создается?

Question

1. Каждый час основная машина занимает минуту, чтобы создать файл дампа около 100 МБ.
2. Резервная копия копирует, используя scp, также почасово.
3. Оба действия запускаются cron для запуска в те же минуты, прошедшие через час.
4. Копия часто содержит только часть файла дампа.

Хотя я мог бы изменить cron на резервной машине, чтобы произойти через 5 минут, это скорее пахнет обманом.

Каков правильный способ решения этой проблемы?

Answer 1

Предполагая, что вы можете изменить исходный код программ, вы можете получить «демпфер» для вывода второго файла, указывающего, что он сделан сбрасыванием.

1. Dumper deletes signal file 
2. Dumper dumps file 
3. Dumper creates signal file 
4. Backup program polls periodically until the signal file is created 
5. Backup program deletes signal file 
6. Backup program has complete file 

Не лучшая форма IPC а как его на другой машине ... Я полагаю, вы могли бы также открыть сетевое соединение, чтобы сделать опрос.

Answer 2

Очень быстро и очень грязно:

my_file=/my/filename 

while [[ -n "$(find $my_file)" -a -n "$(find $my_file -mmin -1)" ]] ; do 
    echo "File '$my_file' exists, but has been recently modified. Waiting..." 
    sleep 10 
done 

scp ...    # if the file does not exist at all, we don't wait for it, but let scp fail 

Answer 3

Попробуйте скопировать файл из основного узла к узлу резервного копирования в одном сценарии:

1. dumpfile 
2. scp 

Тогда это гарантировано, что файл закончен перед тем вызов scp.

Answer 4

Кредиторское задолженность fuser для определения, используется ли файл; что-то вроде:

#!/bin/sh 
MYFILE=myfile #...change as necessary 
while true 
do 
    if [ -z "$(/sbin/fuser ${MYFILE} 2> /dev/null)" ]; then 
     break 
    fi 
    echo "...waiting..." 
    sleep 10 #...adjust as necessary 
done 
echo "Process the file..."