Возможно ли на php реализовать парсинг большого количества страниц?
Написал небольшой парсер , который в цикле парсит страницы сайта.
но почему то примерно после 100 страницы парсинга скрипт виснет.
до 100 страниц парсит нормально.
Почему может зависать?
Может есть какие то настройки PHP, где можно увеличить память или время действия скрипта?
1. sanstorm - 09 Декабря, 2013 - 09:26:12 - перейти к сообщению
2. caballero - 09 Декабря, 2013 - 09:36:49 - перейти к сообщению
таймаут работы скрипта выставте
3. sanstorm - 09 Декабря, 2013 - 09:41:37 - перейти к сообщению
в этом собственно и вопрос, где и как это выставляется
4. AmsTaFF - 09 Декабря, 2013 - 09:44:56 - перейти к сообщению
поищите в php.ini, что-то похожее на max_execution_time ... или типа того
5. esterio - 09 Декабря, 2013 - 11:48:33 - перейти к сообщению
MULTI CURL
?
?