PostgreSQL 9.5: Пропустить первые две строки в текстовом файле

Question

У меня есть текстовый файл для импорта в следующем формате:

columA | columnB | columnC 
----------------------------------------- 
1  |  A   | XYZ 
2  |  B   | XZ 
3  |  C   | YZ 

Я могу пропустить первую строку с помощью:

WITH CSV HEADER; 

в копии команда, но застряла, пропуская вторую строчку.

Answer 1

Если вы используете COPY FROM 'filename', вместо этого вы можете использовать COPY FROM PROGRAM для вызова некоторой команды оболочки, которая удаляет заголовок из файла и возвращает остальные.

В Windows:

COPY t FROM PROGRAM 'more +2 "C:\Path\To\File.txt"' 

В Linux:

COPY t FROM PROGRAM 'tail -n +3 /path/to/file.txt' 

Если вы пытаетесь отправить локальный файл на удаленный сервер, вы можете сделать что-то подобное через psql, например:

tail -n +3 file.txt | psql -c 'COPY t FROM STDIN' 

Answer 2

Команда COPY может пропустить только первую строку. Самое простое решение - вручную удалить вторую строку перед импортом, но если это невозможно, вам придется использовать «грязный» трюк.

Вы создаете таблицу, которая имеет один столбец типа varchar и импортирует текстовый файл в эту таблицу. После импорта вы запускаете функцию PL/pgSQL для чтения всех строк в таблице (за исключением строк заголовка, очевидно) и извлекаете информацию, которую хотите вставить в таблицу назначения, например, с помощью функции regexp_matches() или regexp_split_to_array(). Вы также можете автоматизировать весь процесс, используя триггер после вставки в таблицу импорта, если вам нужно импортировать много файлов с той же проблемой.