Пакетная вставка в рельсах 3

Question

Я хочу сделать пакетную вставку из нескольких тысяч записей в базу данных (POSTGRES в моем случае) из моего приложения Rails.

Каким будет «Rails way» этого? Что-то быстрое, а также правильный способ сделать это.

Я знаю, что могу создать SQL-запрос путем конкатенации строк, но мне нужен лучший подход.

Answer 1

ActiveRecord .create метод поддерживает массовое создание. Метод эмулирует эту функцию, если БД ее не поддерживает и использует базовый механизм БД, если эта функция поддерживается.

Просто передайте множество вариантов.

# Create an Array of new objects 
User.create([{ :first_name => 'Jamie' }, { :first_name => 'Jeremy' }]) 

Блок поддерживается, и это общий способ для общих атрибутов.

# Creating an Array of new objects using a block, where the block is executed for each object: 
User.create([{ :first_name => 'Jamie' }, { :first_name => 'Jeremy' }]) do |u| 
    u.is_admin = false 
end 

Answer 2

Вы можете создать сценарий в модели рельсы, напишите ваши запросы для вставки в этом сценарии В рельсам можно запустить сценарий с помощью

rails runner MyModelName.my_method_name 

Это лучший способ, который я использовал в моем проекте.

Update:

Я использую следующий в моем проекте, но это не является правильным для SQL-инъекции. , если вы не используете пользовательский ввод в запросе он может работать для вас

user_string = " ('a@ao.in','a'), ('b@ao.in','b')" 
User.connection.insert("INSERT INTO users (email, name) VALUES"+user_string) 

для нескольких записей:

new_records = [ 
    {:column => 'value', :column2 => 'value'}, 
    {:column => 'value', :column2 => 'value'} 
] 

MyModel.create(new_records) 

Answer 3

Вы можете сделать это быстрый путь или путь Rails;) лучший способ в моем опыте импортировать массивные данные в Postgres через CSV. Что займет несколько минут, путь Rails займет несколько секунд, используя встроенную функцию импорта CSV Postgres.

http://www.postgresql.org/docs/9.2/static/sql-copy.html

Он даже запускает триггеры базы данных и уважает ограничения базы данных.

Редактировать (после вашего комментария): Gotcha. В этом случае вы правильно описали свои два варианта. Раньше я был в той же ситуации, реализовал его, используя Rails 1000 save! потому что это была простейшая вещь, которая работала, а затем оптимизировала ее для стратегии «добавить огромную строку запроса», поскольку она была на порядок лучше.

Конечно, преждевременная оптимизация - это корень всего зла, поэтому, возможно, это простой медленный путь Rails и знаю, что построение большой строки запроса является совершенно законным методом оптимизации за счет поддержания работоспособности. Я чувствую, что ваш реальный вопрос: «Есть ли способ Railsy, ​​который не включает 1000 запросов?» - К сожалению, ответ на этот вопрос - нет.

Answer 4

Я, наконец, достиг решения после двух ответов @ Симоне Карлетти и @Sumit Munot.

До тех пор, пока драйвер postgres не поддерживает массовую вставку метода ActiveRecord .create, я хотел бы пойти с activerecord-import gem. Это делает объемную вставку, и это тоже в одном заявлении вставки.

books = [] 
10.times do |i| 
    books << Book.new(:name => "book #{i}") 
end 
Book.import books 

В POSTGRES это приводит к одному статусу вставки.

После того, как Postgres драйвер поддерживает массовую вставку метода .create ActiveRecord в одном операторе вставки, а затем раствор @Simone Carletti «s имеет больше смысла :)