Создание таблицы из CSV-файла с использованием PDI Kettle

Question

Я новичок в PDI, и я работаю с PDI Kettle, у меня есть 40 файлов .csv с различным количеством столбцов, я хочу создать таблицы из этих файлов в одно преобразование, я использовал шаг «Вход в файл CSV», чтобы выбрать файл и «Результат таблицы» для создания таблицы, но для создания 40 таблиц из этих 40 файлов мне снова нужно выбрать эти два шага, так что есть ли какие-либо способ создать все 40 столов за один раз в одном преобразовании - это возможно, PLS помочь мне с тем же Заранее спасибо

Answer 1

Для этого в Pentaho со стандартными шагами немного задействовано. Чтобы прочитать CSV и получить заголовки, а затем прочитать данные, вам нужно использовать ETL Metadata injection.

Сначала прочитайте заголовок с именем столбца и используйте ETL Metadata injection, чтобы прочитать данные в другом преобразовании.

Для автоматического создания баз данных не является прямым, так как это то, что главный разработчик Pentaho обескураживает.

Вот ответ и пример того, как автоматически создать таблицу: Perform an auto CREATE TABLE to store the output of a transformation.

Таким образом, вы должны выполнить задание, которое передает имя файла и имя табуляции для преобразования. Преобразование будет использовать ETL Metadata injection, чтобы прочитать CSV в правильные поля и meta.getSQLStatementsString();, чтобы получить DDL базы данных для хранения данных.