Как выполнять параллельные HTTP-запросы в Heroku?

Question

Я создаю приложение Ruby on Rails, которое получает около 6-7 API-интерфейсов, захватывает информацию от них на основе ввода пользователя, сравнивает и отображает результаты для пользователей (информация не сохраняется в базе данных). Я буду использовать Heroku для развертывания приложения. Я хотел бы, чтобы эти HTTP-запросы обращались к API-интерфейсам параллельно, чтобы время ответа было лучше, а не выполнялось последовательно. Как вы думаете, лучший способ добиться этого в Героку?

Благодарим вас за любые предложения!

Answer 1

Если вы действительно хотите делать запросы на стороне сервера (т.у.т. это решение Javascript является хорошей идеей), лучше всего будет использовать EventMachine. Использование EventMachine дает простой способ сделать неблокирующий IO.

Также проверьте EM-Synchrony на набор клиентов с поддержкой волокон Ruby 1.9 (включая HTTP).

Все, что вам нужно сделать для запроса неблокируемой HTTP-то вроде:

require "em-synchrony" 
require "em-synchrony/em-http" 
EM.synchrony do 
    concurrency = 2 
    urls = ['http://url.1.com', 'http://url2.com'] 

    # iterator will execute async blocks until completion, .each, .inject also work! 
    results = EM::Synchrony::Iterator.new(urls, concurrency).map do |url, iter| 

     # fire async requests, on completion advance the iterator 
     http = EventMachine::HttpRequest.new(url).aget 
     http.callback { iter.return(http) } 
     http.errback { iter.return(http) } 
    end 

    p results # all completed requests 
    EventMachine.stop 
end 

GOODLUCK!

Answer 2

Посмотрите на создание каждого запроса в качестве фонового задания: http://blog.heroku.com/archives/2009/7/15/background_jobs_with_dj_on_heroku/

Чем больше «рабочие вы покупаете от Heroku, тем больше фоновых заданий могут быть обработаны одновременно, оставляя«динамометрические стенды»для обслуживания пользователей ,

Answer 3

Вы всегда можете делать запросы на стороне клиента, используя Javascript. Тогда вы можете не только запустить их параллельно, но вам даже не понадобится кругосветное путешествие на ваш собственный сервер.

Answer 4

Я не пробовал распараллеливать подобные запросы. Но я пробовал параллельно по героку, работает как шарм! Это мой простой пост в блоге об этом.

http://olemortenamundsen.wordpress.com/2010/10/17/spawning-multiple-threads-at-heroku-using-parallel/