У меня есть машина CentOS, и я хочу объединить данные .csv.Объедините много файлов CSV в CentOS?
У меня есть тысячи небольших документов с одинаковой информацией о столбцах.
Как я могу объединить все их в файлы размером до 20 МБ?
Например, 1.csv объединил первые несколько файлов, и как только достигнут предел 20 Мб, данные продолжат идти в 2.csv и так далее.
Любая помощь очень ценится
Если они не имеют заголовки, что-то просто;
$ cat *.csv > combined.csv
будет работать (мы бежим в каталог, содержащий файлы (если вы хотите их в том порядке, возвращенного ls *.csv)).
Вы можете посмотреть на утилиту join: https://www.gnu.org/software/coreutils/manual/html_node/join-invocation.html#join-invocation
Вы можете получения идеальной, что вы хотите с простой командой хвост:
tail -q -n+2 *.csv
Вам нужно всего лишь добавить правильный заголовок столбца позже.
Проверьте это! http://apple.stackexchange.com/questions/80611/merging-multiple-csv-files-without-merging-the-header – Nico
Возможно, вы должны использовать язык, подобный 'python', чтобы добиться того, чего вы хотите. – Nico