Установить сеанс, чтобы очистить страницу

Question

URL1: https://duapp3.drexel.edu/webtms_du/

URL2: https://duapp3.drexel.edu/webtms_du/Colleges.asp?Term=201125&univ=DREX

URL3: https://duapp3.drexel.edu/webtms_du/Courses.asp?SubjCode=CS&CollCode=E&univ=DREX

В качестве личного проекта программирования, я хочу, чтобы очистить свой каталог курсов университета и предоставить его в качестве RESTful API ,

Однако я столкнулся с следующей проблемой.

Страница, которую мне нужно очистить, - URL3. Но URL3 возвращает только содержательную информацию после посещения URL2 (он устанавливает термин Colleges.asp?Term=201125), но URL2 можно посещать только после посещения URL1.

Я пытался контролировать данные HTTP, идущие туда и сюда, используя Fiddler, и я не думаю, что они используют файлы cookie. Закрытие браузера мгновенно сбрасывает все, поэтому я подозреваю, что они используют Session.

Как я могу очистить URL 3? Я пробовал, программно, сначала посещать URL-адреса 1 и 2, а затем делать file_get_contents(url3), но это не работает (возможно, потому, что он регистрируется как три разных сеанса.

Answer 1

Для сеанса необходим механизм для идентификации вас. .: печенье, идентификатор сессии URL

curl -v по URL 1 показывает сеанс печенье действительно быть установлено

Set-Cookie: ASPSESSIONIDASBRRCCS=LKLLPGGDFBGGNFJBKKHMPCDA; path=/ 

Вам необходимо отправить эти кук обратно на сервер, на все последующие запросы, чтобы сохранить ваш. сеанс живой.

Если вы хотите использовать file_get_contents, вам необходимо вручную создать для него контекст с stream_context_create для включения файлов cookie с запросом.

Альтернативой (что я бы предпочел лично) было бы использовать curl functions, который удобно предоставляет PHP. (Он может даже заботиться о трафике печенья для вас!) Но это только мои предпочтения.

Edit:

Вот рабочий пример, чтобы очистить путь в вашем вопросе.

$scrape = array(
    "https://duapp3.drexel.edu/webtms_du/", 
    "https://duapp3.drexel.edu/webtms_du/Colleges.asp?Term=201125&univ=DREX", 
    "https://duapp3.drexel.edu/webtms_du/Courses.asp?SubjCode=CS&CollCode=E&univ=DREX" 
); 

$data = ''; 
$ch = curl_init(); 

// Set cookie jar to temporary file, because, even if we don't need them, 
// it seems curl does not store the cookies anywhere otherwise or include 
// them in subsequent requests 
curl_setopt($ch, CURLOPT_COOKIEJAR, tempnam(sys_get_temp_dir(), 'curl')); 

// We don't want direct output by curl 
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); 

// Then run along the scrape path 
foreach ($scrape as $url) { 
    curl_setopt($ch, CURLOPT_URL, $url); 
    $data = curl_exec($ch); 
} 

curl_close($ch); 

echo $data;