Warning: Cannot use a scalar value as an array in /home/admin/public_html/forum/include/fm.class.php on line 757
Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/include/fm.class.php on line 770
Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/topic.php on line 737 Форумы портала PHP.SU :: Помогите допилить практически рабочий код
Покинул форум
Сообщений всего: 38
Дата рег-ции: Февр. 2012
Помог: 0 раз(а)
[+]
Ребят, долго мучился на следующим, кодом, что делать дальше ума не приложу.. помогите допилить.
В общем, есть авторизация, которая вроде работает правильно, при запуске выводит в браузер главную страницу уже авторизованного пользователя - УРА!
Далее есть парсер (на заранее сохраненной странице, работает безупречно), он должен считывать несколько блоков со страницы, которая доступна лишь после авторизации, но поскольку эта страница имеет адрес отличный от главной страницы сайта, данные парсить не получается(( Подпилите код, что бы после авторизации можно было попасть на нужную страницу и далее уже получить данные...
этот запрос не передает куки, делайте с помощью curl
К чему-то подобному я уже пришел, пол-ночи читая форум, т.е. я правильно понимаю, мне в парсер нужно внести код "считывания" куков из файла cookie.txt и их оправки?
P.S. Возможно вы подскажете, мне нужно получать информацию с сайта практически в режиме онлайн, т.е. по сути таймер запроса к серверу должен быть установлен на 1-3 сек. Но, у меня написал js код, который просто обновляет страницу по таймеру... если страница обновляется полностью то по новой запускается код авторизации, далее парсер... это, как по мне, большая нагрузка на сервер. Можно как то установить таймер именно на выполнение кода парсера? ведь если он будет передавать куки то смысл постоянно авторизовываться на целевом сайте...!?
Покинул форум
Сообщений всего: 1372
Дата рег-ции: Нояб. 2014
Помог: 30 раз(а)
Virus1850 пишет:
по сути таймер запроса к серверу должен быть установлен на 1-3 сек.
Вас не забанят? Обычно периодические задачи запускают с помощью планировщика.
Virus1850
Отправлено: 20 Июля, 2016 - 16:01:40
Новичок
Покинул форум
Сообщений всего: 38
Дата рег-ции: Февр. 2012
Помог: 0 раз(а)
[+]
andrewkard пишет:
Virus1850 пишет:
по сути таймер запроса к серверу должен быть установлен на 1-3 сек.
Вас не забанят? Обычно периодические задачи запускают с помощью планировщика.
Думаю нет, на этом сайте переодически не только я используют такую схему, суть в том что сообщения с инфой прилетают в телегу (в чат), и я уже видел примеры работы такого бота, автор конечно не поделились исходником, но сказал что работает обычный парсер.. но судя по тому что инфа в чат прилетала как только страница изменялась, я думаю у него запрос к этой странице выполнялся каждую секунду. Или вы знаете другие схемы выполнения моей задачи, что бы не нагружать сервер?
Virus1850
Отправлено: 20 Июля, 2016 - 20:06:27
Новичок
Покинул форум
Сообщений всего: 38
Дата рег-ции: Февр. 2012
Помог: 0 раз(а)
[+]
С помощью этого, получил в браузер необходимую страницу! Скажите, как извлечь из нее инфу ли вернуть в переменную в формате html и запихнуть ее в парсер который ниже. $result почему то выводи просто 1 - если убрать, страница остается, единица естественно исчезает.
Все гости форума могут просматривать этот раздел. Только зарегистрированные пользователи могут создавать новые темы в этом разделе. Только зарегистрированные пользователи могут отвечать на сообщения в этом разделе.