Warning: Cannot use a scalar value as an array in /home/admin/public_html/forum/include/fm.class.php on line 757

Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/include/fm.class.php on line 770

Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/topic.php on line 737
Форумы портала PHP.SU :: Не могу получить результат curl

 PHP.SU

Программирование на PHP, MySQL и другие веб-технологии
PHP.SU Портал     На главную страницу форума Главная     Помощь Помощь     Поиск Поиск     Поиск Яндекс Поиск Яндекс     Вакансии  Пользователи Пользователи


 Страниц (1): [1]   

> Без описания
lorderetik
Отправлено: 29 Сентября, 2015 - 18:33:06
Post Id


Новичок


Покинул форум
Сообщений всего: 3
Дата рег-ции: Март 2014  


Помог: 0 раз(а)




Не могу спарсить сайт, пишет

Not Found
The requested URL ...

PHP:
скопировать код в буфер обмена
  1.  
  2.  
  3. $url = 'http://www.zara.com/pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html';
  4.  
  5. $ch = curl_init();
  6. curl_setopt($ch, CURLOPT_URL, $url);
  7. curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
  8. curl_setopt($ch, CURLOPT_REFERER, $url);
  9. $output = curl_exec($ch);
  10. curl_close($ch);
  11.  
  12. echo $output;
  13.  


Возвращает
Not Found

The requested URL /pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html was not found on this server.

Хотя страницы такая открывается. Помогите пожалуйста кто знает причину.

(Отредактировано автором: 29 Сентября, 2015 - 18:33:42)

 
 Top
lastdays
Отправлено: 29 Сентября, 2015 - 20:41:12
Post Id



Частый гость


Покинул форум
Сообщений всего: 220
Дата рег-ции: Март 2013  


Помог: 7 раз(а)




PHP:
скопировать код в буфер обмена
  1.  
  2. function curl_test( )
  3. {
  4.     $cookie_file2 = 'cook2.txt';
  5.     $ch2 = curl_init();
  6.     $url_string2 = 'http://www.zara.com/pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html';
  7.     curl_setopt($ch2, CURLOPT_URL, $url_string2);
  8.     curl_setopt($ch2, CURLOPT_RETURNTRANSFER, 1); // возвращает веб-страницу
  9.     curl_setopt($ch2, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 6.3; Trident/7.0; rv 11.0) like Gecko');
  10.     curl_setopt($ch2, CURLOPT_SSL_VERIFYPEER, 0);
  11.     curl_setopt($ch2, CURLOPT_SSL_VERIFYHOST, 2);
  12.     curl_setopt($ch2, CURLOPT_HEADER, 0); // не возвращает заголовки
  13.     curl_setopt($ch2, CURLOPT_FOLLOWLOCATION, 1); // переходит по редиректам
  14.     curl_setopt($ch2, CURLOPT_ENCODING, ""); // обрабатывает все кодировки
  15.     curl_setopt($ch2, CURLOPT_MAXREDIRS, 10); // останавливаться после 10-ого редиректа
  16.     curl_setopt($ch2, CURLOPT_COOKIEFILE,  $cookie_file2);
  17.     curl_setopt($ch2, CURLOPT_COOKIEJAR,  $cookie_file2);
  18.     curl_setopt($ch2, CURLOPT_AUTOREFERER, 1);
  19.     curl_setopt($ch2, CURLOPT_REFERER, "http://www.zara.com/");
  20.     curl_setopt($ch2, CURLOPT_TIMEOUT, 0);
  21.     $res2 = curl_exec($ch2);
  22.     $res_info_hmu = $res2;
  23.     curl_close($ch2);
  24.     return $res_info_hmu;
  25. }
  26.  
  27.  
  28. print curl_test();
  29.  
 
 Top
lorderetik
Отправлено: 30 Сентября, 2015 - 11:58:16
Post Id


Новичок


Покинул форум
Сообщений всего: 3
Дата рег-ции: Март 2014  


Помог: 0 раз(а)




lastdays пишет:
PHP:
скопировать код в буфер обмена
  1.  
  2. function curl_test( )
  3. {
  4.     $cookie_file2 = 'cook2.txt';
  5.     $ch2 = curl_init();
  6.     $url_string2 = 'http://www.zara.com/pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html';
  7.     curl_setopt($ch2, CURLOPT_URL, $url_string2);
  8.     curl_setopt($ch2, CURLOPT_RETURNTRANSFER, 1); // возвращает веб-страницу
  9.     curl_setopt($ch2, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 6.3; Trident/7.0; rv 11.0) like Gecko');
  10.     curl_setopt($ch2, CURLOPT_SSL_VERIFYPEER, 0);
  11.     curl_setopt($ch2, CURLOPT_SSL_VERIFYHOST, 2);
  12.     curl_setopt($ch2, CURLOPT_HEADER, 0); // не возвращает заголовки
  13.     curl_setopt($ch2, CURLOPT_FOLLOWLOCATION, 1); // переходит по редиректам
  14.     curl_setopt($ch2, CURLOPT_ENCODING, ""); // обрабатывает все кодировки
  15.     curl_setopt($ch2, CURLOPT_MAXREDIRS, 10); // останавливаться после 10-ого редиректа
  16.     curl_setopt($ch2, CURLOPT_COOKIEFILE,  $cookie_file2);
  17.     curl_setopt($ch2, CURLOPT_COOKIEJAR,  $cookie_file2);
  18.     curl_setopt($ch2, CURLOPT_AUTOREFERER, 1);
  19.     curl_setopt($ch2, CURLOPT_REFERER, "http://www.zara.com/");
  20.     curl_setopt($ch2, CURLOPT_TIMEOUT, 0);
  21.     $res2 = curl_exec($ch2);
  22.     $res_info_hmu = $res2;
  23.     curl_close($ch2);
  24.     return $res_info_hmu;
  25. }
  26.  
  27.  
  28. print curl_test();
  29.  


Спасибо большое, разобрался, заработало.
 
 Top
lorderetik
Отправлено: 06 Октября, 2015 - 13:46:50
Post Id


Новичок


Покинул форум
Сообщений всего: 3
Дата рег-ции: Март 2014  


Помог: 0 раз(а)




lastdays пишет:
PHP:
скопировать код в буфер обмена
  1.  
  2. function curl_test( )
  3. {
  4.     $cookie_file2 = 'cook2.txt';
  5.     $ch2 = curl_init();
  6.     $url_string2 = 'http://www.zara.com/pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html';
  7.     curl_setopt($ch2, CURLOPT_URL, $url_string2);
  8.     curl_setopt($ch2, CURLOPT_RETURNTRANSFER, 1); // возвращает веб-страницу
  9.     curl_setopt($ch2, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 6.3; Trident/7.0; rv 11.0) like Gecko');
  10.     curl_setopt($ch2, CURLOPT_SSL_VERIFYPEER, 0);
  11.     curl_setopt($ch2, CURLOPT_SSL_VERIFYHOST, 2);
  12.     curl_setopt($ch2, CURLOPT_HEADER, 0); // не возвращает заголовки
  13.     curl_setopt($ch2, CURLOPT_FOLLOWLOCATION, 1); // переходит по редиректам
  14.     curl_setopt($ch2, CURLOPT_ENCODING, ""); // обрабатывает все кодировки
  15.     curl_setopt($ch2, CURLOPT_MAXREDIRS, 10); // останавливаться после 10-ого редиректа
  16.     curl_setopt($ch2, CURLOPT_COOKIEFILE,  $cookie_file2);
  17.     curl_setopt($ch2, CURLOPT_COOKIEJAR,  $cookie_file2);
  18.     curl_setopt($ch2, CURLOPT_AUTOREFERER, 1);
  19.     curl_setopt($ch2, CURLOPT_REFERER, "http://www.zara.com/");
  20.     curl_setopt($ch2, CURLOPT_TIMEOUT, 0);
  21.     $res2 = curl_exec($ch2);
  22.     $res_info_hmu = $res2;
  23.     curl_close($ch2);
  24.     return $res_info_hmu;
  25. }
  26.  
  27.  
  28. print curl_test();
  29.  


Добрый день.
Прошло некоторое время и перестало работать, выкидывает на главную страницу zara.com, где надо типо выбрать страну и язык.
cookie файл я экспортирую при помощи firebug, там есть экпорт cookie.
Но теперь перестало все работать, не могли бы вы помочь разобраться в чем дело? и как вы получили cookie файл, или в чем то другом дело?

Сейчас у меня вот такой вот код

PHP:
скопировать код в буфер обмена
  1.                 $cookie_file = 'http://'.$_SERVER['HTTP_HOST'].'/cookie/zara.txt';
  2.  
  3.                 $ch = curl_init();
  4.                 curl_setopt($ch, CURLOPT_URL, $url);
  5.                 curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
  6.                 curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 6.3; Trident/7.0; rv 11.0) like Gecko');
  7.                 curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, 0);
  8.                 curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, 2);
  9.                 curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
  10.                 curl_setopt($ch, CURLOPT_AUTOREFERER, 1);
  11.                 curl_setopt($ch, CURLOPT_REFERER, "http://www.zara.com/");
  12.                 curl_setopt($ch, CURLOPT_COOKIEFILE,  $cookie_file);
  13.                 curl_setopt($ch, CURLOPT_COOKIEJAR,  $cookie_file);
  14.                
  15.                 $output = curl_exec($ch);
  16.                 curl_close($ch);


Спасибо.
 
 Top
Страниц (1): [1]
Сейчас эту тему просматривают: 0 (гостей: 0, зарегистрированных: 0)
« Работа с сетью »


Все гости форума могут просматривать этот раздел.
Только зарегистрированные пользователи могут создавать новые темы в этом разделе.
Только зарегистрированные пользователи могут отвечать на сообщения в этом разделе.
 



Powered by PHP  Powered By MySQL  Powered by Nginx  Valid CSS  RSS

 
Powered by ExBB FM 1.0 RC1. InvisionExBB