Warning: Cannot use a scalar value as an array in /home/admin/public_html/forum/include/fm.class.php on line 757

Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/include/fm.class.php on line 770

Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/topic.php on line 737
Форумы портала PHP.SU :: Динамически миняющейся ip

 PHP.SU

 Программирование на PHP, MySQL и другие веб-технологии
PHP.SU Портал     На главную страницу форума Главная     Помощь Помощь     Поиск Поиск     Поиск Яндекс Поиск Яндекс     Вакансии  Пользователи Пользователи


 Страниц (1): [1]   

> Без описания
Поиск в теме | Версия для печати
Serhio
Отправлено: 26 Декабря, 2016 - 01:31:45
Post Id



Частый гость


Покинул форум
Сообщений всего: 194
Дата рег-ции: Март 2012  


Помог: 1 раз(а)
Всем привет!

Мне нужно вытащить базу адресов с сайта.

Сайт на https

Делаю с помощью curl все

На разовых запросах работает отлично

При многочастотном запросе сайт блокирует меня, походу навечно

Если сразу меняю сеть интернета (в данном случае на моб интернет), то все работает, при повторе многочастотного запроса опять блокировка.

Это навело меня на мысль, что если иметь возможность менять ip адреса, то можно обмануть блокировку.

Что скажете? Есть такая возможность? Кто-то сталкивался с такой проблемой?

Заранее спасибо.
 
 Top
skiphog
Отправлено: 26 Декабря, 2016 - 07:38:19
Post Id



Частый гость


Покинул форум
Сообщений всего: 139
Дата рег-ции: Дек. 2014  
Откуда: Киров, Россия


Помог: 11 раз(а)
Посмотрите здесь https://youtu[dot]be/EBfQa8NkJbA?lis[dot][dot][dot]b3s_hnJDEuYHQFBr

Как раз про подмену ip адресов при парсинге
 
My status
 Top
lamokk
Отправлено: 28 Декабря, 2016 - 14:14:41
Post Id


Новичок


Покинул форум
Сообщений всего: 46
Дата рег-ции: Апр. 2013  


Помог: 0 раз(а)
В curl-е есть опция proxy.
Найди с десяток прокси и меняй при каждом новом запросе.
 
 Top
Поиск в теме | Версия для печати
Страниц (1): [1]
Сейчас эту тему просматривают: 0 (гостей: 0, зарегистрированных: 0)
« Вопросы новичков »


Все гости форума могут просматривать этот раздел.
Только зарегистрированные пользователи могут создавать новые темы в этом разделе.
Только зарегистрированные пользователи могут отвечать на сообщения в этом разделе.
  



Powered by PHP  Powered By MySQL  Powered by Nginx  Valid CSS  RSS

 
Powered by ExBB FM 1.0 RC1. InvisionExBB