Форумы портала PHP.SU :: Версия для печати :: проблема с загрузкой страницы curl

1. gin101 - 18 Ноября, 2016 - 19:12:01 - перейти к сообщению

Добрый день! проблема такова, мне необходимо пропарсить некоторый сайт, но когда я пытаюсь забрать страницу через curl сайт кидает редирект 302, я не могу понять толи это защита такая толи я неправильно все делаю
'https://play.shikimori.org/animes/32998-91-days/video_online/1' - страница которую я пытаюсь парсить
вот такие заголовки мне отправляет этот сайт (полученно функцией get_headers)

CODE (htmlphp):
скопировать код в буфер обмена

 
Array ( 
[0] => HTTP/1.1 302 Found 
[1] => Server: nginx 
[2] => Date: Fri, 18 Nov 2016 16:56:01 GMT 
[3] => Content-Type: text/html; charset=utf-8 
[4] => Connection: close 
[5] => X-Frame-Options: SAMEORIGIN 
[6] => X-XSS-Protection: 1; mode=block 
[7] => X-Content-Type-Options: nosniff 
[8] => Location: //play.shikimori.org/animes/32998-91-days 
[9] => Cache-Control: no-cache 
[10] => X-Request-Id: cf64d88c-4485-4e17-8a93-147fe0ccb969 
[11] => X-Runtime: 0.013295 
[12] => Vary: Origin 
[13] => Strict-Transport-Security: max-age=31536000 
[14] => HTTP/1.1 404 Not Found 
[15] => Server: nginx 
[16] => Date: Fri, 18 Nov 2016 16:56:02 GMT 
[17] => Content-Type: text/html; charset=utf-8 
[18] => Content-Length: 0 
[19] => Connection: close 
[20] => X-Request-Id: 1b9faba2-72fa-40b6-a766-42028c6fbabd 
[21] => X-Runtime: 0.004671 
[22] => Vary: Origin 
[23] => Strict-Transport-Security: max-age=31536000 )

а вот такие кидает когда я делаю тоже самое но только со своего компа через xampp

CODE (htmlphp):
скопировать код в буфер обмена

Array ( 
[0] => HTTP/1.1 200 OK 
[1] => Server: nginx 
[2] => Date: Fri, 18 Nov 2016 17:03:30 GMT 
[3] => Content-Type: text/html; charset=utf-8 
[4] => Connection: close 
[5] => X-Frame-Options: SAMEORIGIN 
[6] => X-XSS-Protection: 1; mode=block 
[7] => X-Content-Type-Options: nosniff 
[8] => ETag: W/"2f0e6af9054a5b8efaf7372bc2ffad81" 
[9] => Cache-Control: max-age=0, private, must-revalidate 
[10] => Set-Cookie: anime_video_kind=fandub; path=/ 
[11] => Set-Cookie: anime_video_hosting=vk.com; path=/ 
[12] => Set-Cookie: anime_video_author=4Anime; path=/ 
[13] => Set-Cookie: _kawai_session=NTVJTmRUQVNsTXVHT0xHb1J1NVBxM3c0MnU0dktOZVNNaU9hR1ZVb0pKMEM4U0xkZkdDUHdWeDBVTVIrVDBNQ2xSSm5GdXZFSWQ3L0FLWk9iUXovQ0tyQTlkMXN1WDA1eHZ1STZkSnBTeWtHMzEvUStrVmNRSFRqN1ZocU1LUm1KaS9JaXhEMHhPZisrcm9RV0JQTmoyNlVZMmZIc3A2MGZrSXJNMjl5ZDQ2UFl4Z1RtQXBKM0RGbm8xU2FUbnU4LS1rcEdlbno0SVQ2T0Qzc05LN1J0ZVVBPT0%3D--f015e9acd97919151c01818b572af156665b406a; domain=.shikimori.org; path=/; expires=Sat, 18 Nov 2017 17:03:30 -0000; HttpOnly 
[14] => X-Request-Id: eee3f68b-fed7-48e7-8c7c-f9099503e907 
[15] => X-Runtime: 1.133988 
[16] => Vary: Origin 
[17] => Strict-Transport-Security: max-age=31536000 )

при чем когда я через xampp загружаю страницу она загружается функцией file_get_contents

опцию CURLOPT_FOLLOWLOCATION я включить не могу на хостинге по причине того что у меня нет доступа к файлу конфигурации php

возможно это какая-то проверка от спама на сайт или умышленная защита? как можно обойти это? возможно есть другие библиотеки которые могут подделывать работу браузера для php? или другие способы получить содержимое страницы?