Форумы портала PHP.SU :: Версия для печати :: Не могу получить результат curl

Warning: Cannot use a scalar value as an array in /home/admin/public_html/forum/include/fm.class.php on line 757

Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/include/fm.class.php on line 770
Форумы портала PHP.SU :: Версия для печати :: Не могу получить результат curl

Форумы портала PHP.SU » » Работа с сетью » Не могу получить результат curl

Страниц (1): [1]

1. lorderetik - 29 Сентября, 2015 - 18:33:06 - перейти к сообщению

Не могу спарсить сайт, пишет

Not Found
The requested URL ...

PHP:
скопировать код в буфер обмена

 
 
$url = 'http://www.zara.com/pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html';
 
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_REFERER, $url);
$output = curl_exec($ch);
curl_close($ch); 
 
echo $output;
 

Возвращает
Not Found

The requested URL /pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html was not found on this server.

Хотя страницы такая открывается. Помогите пожалуйста кто знает причину.

2. lastdays - 29 Сентября, 2015 - 20:41:12 - перейти к сообщению

PHP:
скопировать код в буфер обмена

 
function curl_test( )
{
    $cookie_file2 = 'cook2.txt';
    $ch2 = curl_init();
    $url_string2 = 'http://www.zara.com/pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html';
    curl_setopt($ch2, CURLOPT_URL, $url_string2);
    curl_setopt($ch2, CURLOPT_RETURNTRANSFER, 1); // возвращает веб-страницу
    curl_setopt($ch2, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 6.3; Trident/7.0; rv 11.0) like Gecko');
    curl_setopt($ch2, CURLOPT_SSL_VERIFYPEER, 0);
    curl_setopt($ch2, CURLOPT_SSL_VERIFYHOST, 2);
    curl_setopt($ch2, CURLOPT_HEADER, 0); // не возвращает заголовки
    curl_setopt($ch2, CURLOPT_FOLLOWLOCATION, 1); // переходит по редиректам
    curl_setopt($ch2, CURLOPT_ENCODING, ""); // обрабатывает все кодировки
    curl_setopt($ch2, CURLOPT_MAXREDIRS, 10); // останавливаться после 10-ого редиректа
    curl_setopt($ch2, CURLOPT_COOKIEFILE,  $cookie_file2);
    curl_setopt($ch2, CURLOPT_COOKIEJAR,  $cookie_file2);
    curl_setopt($ch2, CURLOPT_AUTOREFERER, 1);
    curl_setopt($ch2, CURLOPT_REFERER, "http://www.zara.com/");
    curl_setopt($ch2, CURLOPT_TIMEOUT, 0);
    $res2 = curl_exec($ch2);
    $res_info_hmu = $res2;
    curl_close($ch2);
    return $res_info_hmu;
}
 
 
print curl_test();
 

3. lorderetik - 30 Сентября, 2015 - 11:58:16 - перейти к сообщению

lastdays пишет:

PHP:
скопировать код в буфер обмена

 
function curl_test( )
{
    $cookie_file2 = 'cook2.txt';
    $ch2 = curl_init();
    $url_string2 = 'http://www.zara.com/pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html';
    curl_setopt($ch2, CURLOPT_URL, $url_string2);
    curl_setopt($ch2, CURLOPT_RETURNTRANSFER, 1); // возвращает веб-страницу
    curl_setopt($ch2, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 6.3; Trident/7.0; rv 11.0) like Gecko');
    curl_setopt($ch2, CURLOPT_SSL_VERIFYPEER, 0);
    curl_setopt($ch2, CURLOPT_SSL_VERIFYHOST, 2);
    curl_setopt($ch2, CURLOPT_HEADER, 0); // не возвращает заголовки
    curl_setopt($ch2, CURLOPT_FOLLOWLOCATION, 1); // переходит по редиректам
    curl_setopt($ch2, CURLOPT_ENCODING, ""); // обрабатывает все кодировки
    curl_setopt($ch2, CURLOPT_MAXREDIRS, 10); // останавливаться после 10-ого редиректа
    curl_setopt($ch2, CURLOPT_COOKIEFILE,  $cookie_file2);
    curl_setopt($ch2, CURLOPT_COOKIEJAR,  $cookie_file2);
    curl_setopt($ch2, CURLOPT_AUTOREFERER, 1);
    curl_setopt($ch2, CURLOPT_REFERER, "http://www.zara.com/");
    curl_setopt($ch2, CURLOPT_TIMEOUT, 0);
    $res2 = curl_exec($ch2);
    $res_info_hmu = $res2;
    curl_close($ch2);
    return $res_info_hmu;
}
 
 
print curl_test();
 

Спасибо большое, разобрался, заработало.

4. lorderetik - 06 Октября, 2015 - 13:46:50 - перейти к сообщению

lastdays пишет:

PHP:
скопировать код в буфер обмена

 
function curl_test( )
{
    $cookie_file2 = 'cook2.txt';
    $ch2 = curl_init();
    $url_string2 = 'http://www.zara.com/pl/pl/editorials/little-prices-|-boys/look-2-c766005p3071520.html';
    curl_setopt($ch2, CURLOPT_URL, $url_string2);
    curl_setopt($ch2, CURLOPT_RETURNTRANSFER, 1); // возвращает веб-страницу
    curl_setopt($ch2, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 6.3; Trident/7.0; rv 11.0) like Gecko');
    curl_setopt($ch2, CURLOPT_SSL_VERIFYPEER, 0);
    curl_setopt($ch2, CURLOPT_SSL_VERIFYHOST, 2);
    curl_setopt($ch2, CURLOPT_HEADER, 0); // не возвращает заголовки
    curl_setopt($ch2, CURLOPT_FOLLOWLOCATION, 1); // переходит по редиректам
    curl_setopt($ch2, CURLOPT_ENCODING, ""); // обрабатывает все кодировки
    curl_setopt($ch2, CURLOPT_MAXREDIRS, 10); // останавливаться после 10-ого редиректа
    curl_setopt($ch2, CURLOPT_COOKIEFILE,  $cookie_file2);
    curl_setopt($ch2, CURLOPT_COOKIEJAR,  $cookie_file2);
    curl_setopt($ch2, CURLOPT_AUTOREFERER, 1);
    curl_setopt($ch2, CURLOPT_REFERER, "http://www.zara.com/");
    curl_setopt($ch2, CURLOPT_TIMEOUT, 0);
    $res2 = curl_exec($ch2);
    $res_info_hmu = $res2;
    curl_close($ch2);
    return $res_info_hmu;
}
 
 
print curl_test();
 

Добрый день.
Прошло некоторое время и перестало работать, выкидывает на главную страницу zara.com, где надо типо выбрать страну и язык.
cookie файл я экспортирую при помощи firebug, там есть экпорт cookie.
Но теперь перестало все работать, не могли бы вы помочь разобраться в чем дело? и как вы получили cookie файл, или в чем то другом дело?

Сейчас у меня вот такой вот код

PHP:
скопировать код в буфер обмена

                $cookie_file = 'http://'.$_SERVER['HTTP_HOST'].'/cookie/zara.txt';
 
                $ch = curl_init();
                curl_setopt($ch, CURLOPT_URL, $url);
                curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
                curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 6.3; Trident/7.0; rv 11.0) like Gecko');
                curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, 0);
                curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, 2); 
                curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
                curl_setopt($ch, CURLOPT_AUTOREFERER, 1);
                curl_setopt($ch, CURLOPT_REFERER, "http://www.zara.com/");
                curl_setopt($ch, CURLOPT_COOKIEFILE,  $cookie_file);
                curl_setopt($ch, CURLOPT_COOKIEJAR,  $cookie_file);
                
                $output = curl_exec($ch);
                curl_close($ch); 

Спасибо.