Я использую node-casperjs-aws-lambda, чтобы создать свой casperjs, я обновить версию phantomjs 2.1.1 и развернуть код с базовым примером на Lambda, который прекрасно работаетCasperJs с AWS Lambda
Но когда я пытаюсь проверить casperJs с веб-сайтом Amazon это не сработало. Страница не загружается, но в местных, это работа:
// Simple Javascript example
var casper = require('casper').create();
casper.options.verbose = true;
casper.options.logLevel ="debug";
casper.userAgent('Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10; rv:33.0) Gecko/20100101 Firefox/33.0');
var amazonProduct = 'https://www.amazon.fr/gp/product/B017DBB1S8';
console.log('Loading a web page: ' + amazonProduct);
// Ouvre la page produit
casper.start(amazonProduct, function()
{
this.echo('Page title is: ' + this.getTitle());
});
casper.run();
Облако Часы отладки мод дают мне:
Loading a web page: https://www.amazon.fr/gp/product/B017DBB1S8
2017-01-31T22:04:30.553Z
[36m[info][0m [phantom] Starting...
[36m[info][0m [phantom] Running suite: 2 steps
[32;1m[debug][0m [phantom] opening url: https://www.amazon.fr/gp/product/B017DBB1S8, HTTP GET
[32;1m[debug][0m [phantom] Navigation requested: url=https://www.amazon.fr/gp/product/B017DBB1S8, type=Other, willNavigate=true, isMainFrame=true
2017-01-31T22:04:31.190Z [32;1m[debug][0m [phantom] url changed to "https://www.amazon.fr/gp/product/B017DBB1S8"
2017-01-31T22:04:43.074Z [32;1m[debug][0m [phantom] Navigation requested: url=about:blank, type=Other, willNavigate=true, isMainFrame=false
END RequestId: 3b415fbd-e801-11e6-9736-75ef38e95128
Duration: 15001.48 ms Billed Duration: 15000 ms Memory Size: 128 MB Max Memory Used: 74 MB
Я не понимаю эту проблему (я перестарался с оригинальной версией phantomjs 1.9.8 дается с пакетом, но у меня такая же проблема)
Благодаря
FYI. Когда я писал гусеничный сайт для амазонки, я просто обнаружил, что сайт Amazon блокирует мой запрос, поэтому я использовал Tor для динамического переключения IP-адресов. – narainsagar
спасибо за ваш совет. – MatinGarrix