PHP.SU

Программирование на PHP, MySQL и другие веб-технологии

PHP.SU Портал

Главная

Помощь

Поиск

Поиск Яндекс Вакансии

Пользователи

Здравствуйте, Гость

( Вход · Регистрация · Правила форума )

Забыли пароль?

Сайт блокирует парсер

Форумы портала PHP.SU » PHP » Программирование на PHP » Работа с сетью (Модераторы: OrmaJever, Саныч)

Страниц (1): [1]

Без описания

Поиск в теме | Версия для печати

fofan1988	Отправлено: 25 Ноября, 2013 - 14:32:05
Новичок Покинул форум Сообщений всего: 2 Дата рег-ции: Нояб. 2013 Помог: 0 раз(а)	Пытаюсь спарсить с сайта все email-адреса. Парсить пытался без CURLа, просто через file_get_content, использовал ajax, ставил рандомное время таймаута между открытием страниц, в результате - на n-ной странице (10 - 15) получал бан по IP на сутки. Сайт несколько раз лежал от DDOSа. Возможно это как то связано с анти-DDOS системой. Слышал, что такие вещи лучше делать через CURL, только вот изменит ситуацию его использование - не знаю.

caballero	Отправлено: 25 Ноября, 2013 - 14:41:59
Активный участник Покинул форум Сообщений всего: 5998 Дата рег-ции: Сент. 2011 Откуда: Харьков Помог: 126 раз(а)	не изменит сайту все равно чем контент выкачивается ----- Бесплатная система складского учета с открытым кодом https://zippy[dot]com[dot]ua/zstore

EuGen	Отправлено: 25 Ноября, 2013 - 15:02:39
Профессионал Покинул форум Сообщений всего: 9095 Дата рег-ции: Июнь 2007 Откуда: Berlin Помог: 707 раз(а)	fofan1988 пишет: Слышал, что такие вещи лучше делать через CURL, только вот изменит ситуацию его использование - не знаю. А я слышал, что e-mail адреса с веб-страниц собирают те, кто занимается спам-рассылками. ----- Есть в мире две бесконечные вещи - это Вселенная и человеческая глупость. Но насчет первой .. я не уверен.

Поиск в теме | Версия для печати

Страниц (1): [1]

Сейчас эту тему просматривают: 0 (гостей: 0, зарегистрированных: 0)

« Работа с сетью »

Все гости форума могут просматривать этот раздел.
Только зарегистрированные пользователи могут создавать новые темы в этом разделе.
Только зарегистрированные пользователи могут отвечать на сообщения в этом разделе.