Форумы портала PHP.SU :: Версия для печати :: Как из списка URL одного сайта узнать рабочие / не рабочие страницы?

1. rownong - 24 Сентября, 2016 - 09:47:57 - перейти к сообщению

Есть список из 1000 URL одного сайта. Часть страниц работают, часть не работают.
Как можно быстро узнать рабочие / нерабочие URL ?

2. armancho7777777 - 24 Сентября, 2016 - 14:49:21 - перейти к сообщению

"Стучитесь" по каждому url используя http метод HEAD, и проверяйте статус ответа. Например:

PHP:
скопировать код в буфер обмена

stream_context_set_default(['http' => [
    'method' => 'HEAD'
]]);
 
$headers = get_headers('http://example.com');