Каждую минуту мое приложение создает некоторые данные и отправляет их на более чем 1000 удаленных серверов через обратные вызовы URL-адреса. URL-адрес обратного вызова для каждого сервера хранится на отдельных объектах. Временная задержка между созданием данных и отправкой их на удаленные серверы должна быть примерно менее 5 секунд.Как отключить запросы на выборку URL-адресов своевременно?
Моя первоначальная мысль заключается в использовании API конвейера для разворачивания запросов на выборку URL в разные очереди задач.
К сожалению, очереди задач не гарантируются своевременно. Поэтому, начиная с запроса очереди задач, запуск которой фактически выполняется, может занять от нескольких минут до нескольких часов. Из предыдущего опыта этот пробел регулярно превышает одну минуту, поэтому это необязательно.
Есть ли какой-либо путь из App Engine для достижения того, чего я хочу? Может быть, вы знаете внешнюю службу, которая может сделать фанат своевременно?
Возможно, я мог использовать URL Fetch для прямого вызова экземпляров внешнего интерфейса в моем собственном приложении, которое в свою очередь вызывает выбор URL-адреса на удаленных серверах? В каком случае, как мне следует оштрафовать обратные вызовы, как это делается с API Pipeline? – Dan
Я знаю, что этот вопрос старый. Так как вы говорите 1000 урн, а не 10 000 ... вы посмотрели на перспективный поиск? Вы нашли хорошее решение? – Jay
Я закончил делать то, что я сказал в предыдущем комментарии, и использовать внешние экземпляры, вызванные URLFetch, чтобы отключиться. Я также использовал принципы https://code.google.com/p/appengine-mapreduce/wiki/ScatterPropertyImplementation, чтобы решить, как много обойти. – Dan