PHP.SU

Программирование на PHP, MySQL и другие веб-технологии

PHP.SU Портал

Главная

Помощь

Поиск

Поиск Яндекс Вакансии

Пользователи

Здравствуйте, Гость

( Вход · Регистрация · Правила форума )

Забыли пароль?

анонимный прокси на пхп

Форумы портала PHP.SU » PHP » Программирование на PHP » Вопросы новичков (Модераторы: OrmaJever, Саныч, Строитель)

Страниц (1): [1]

Без описания

Поиск в теме | Версия для печати

sharp-net	Отправлено: 29 Июля, 2011 - 12:34:32
Новичок Покинул форум Сообщений всего: 14 Дата рег-ции: Июль 2011 Помог: 0 раз(а)	тему создавал но ее почему, то удалили. Яндекс при частом обращении выдает капчу...и парсер естественно не работает, подскажите как реализовать использование freeproxy на php. Примерная реализация прогоняем парсер пару раз и отправляем запросы через анонимные прокси...пару проходов и опять меняем (листинг проксей из текстового файла). Я админ, с пхп не дружу но это не беда....пните в нужную сторону или пару готовых не особо навороченных проектов кинте плиз

OrmaJever	Отправлено: 29 Июля, 2011 - 12:40:15
Активный участник Покинул форум Сообщений всего: 7540 Дата рег-ции: Янв. 2010 Откуда: Чернигов Помог: 299 раз(а)	http://php.su/lessons/?lesson_11 curl_setopt() CURLOPT_PROXY ----- Если вы хотя бы 3-4 раза не решите всё выкинуть и начать заново - вы явно что-то делаете не так.

sharp-net	Отправлено: 29 Июля, 2011 - 13:40:18
Новичок Покинул форум Сообщений всего: 14 Дата рег-ции: Июль 2011 Помог: 0 раз(а)	OrmaJever пишет: http://php.su/lessons/?lesson_11 curl_setopt() CURLOPT_PROXY это конечно полезно, но у меня скрипт гет_контент использует...вопрос то про перенаправление трафика через анонимные прокси

LIME	Отправлено: 29 Июля, 2011 - 13:46:36
Активный участник Покинул форум Сообщений всего: 10732 Дата рег-ции: Нояб. 2010 Помог: 322 раз(а)	sharp-net пишет: но у меня скрипт гет_контент использует так переделайте будет 4 строчки вместо одной ничего страшного

sharp-net	Отправлено: 29 Июля, 2011 - 13:52:34
Новичок Покинул форум Сообщений всего: 14 Дата рег-ции: Июль 2011 Помог: 0 раз(а)	LIME пишет: так переделайте будет 4 строчки вместо одной ничего страшного не будет капчи вылезать что ли из-за этой переделки?

OrmaJever	Отправлено: 29 Июля, 2011 - 14:20:43
Активный участник Покинул форум Сообщений всего: 7540 Дата рег-ции: Янв. 2010 Откуда: Чернигов Помог: 299 раз(а)	sharp-net пишет: это конечно полезно, но у меня скрипт гет_контент использует и что? если хотите используйте гет_контент дольше и ловите капчу... ----- Если вы хотя бы 3-4 раза не решите всё выкинуть и начать заново - вы явно что-то делаете не так.

sharp-net	Отправлено: 29 Июля, 2011 - 14:50:52
Новичок Покинул форум Сообщений всего: 14 Дата рег-ции: Июль 2011 Помог: 0 раз(а)	OrmaJever пишет: sharp-net пишет: это конечно полезно, но у меня скрипт гет_контент использует и что? если хотите используйте гет_контент дольше и ловите капчу... при использовании curl не будет капчи?

Мелкий	Отправлено: 29 Июля, 2011 - 15:07:18
Активный участник Покинул форум Сообщений всего: 11926 Дата рег-ции: Июль 2009 Откуда: Россия, Санкт-Петербург Помог: 618 раз(а)	Будет, конечно. При превышении интенсивности запросов с одного IP. ----- PostgreSQL DBA

OrmaJever	Отправлено: 29 Июля, 2011 - 17:27:39
Активный участник Покинул форум Сообщений всего: 7540 Дата рег-ции: Янв. 2010 Откуда: Чернигов Помог: 299 раз(а)	sharp-net пишет: при использовании curl не будет капчи? curl даёт больше возможностей етого избежать, даже просто прокси использовать. ----- Если вы хотя бы 3-4 раза не решите всё выкинуть и начать заново - вы явно что-то делаете не так.

sharp-net	Отправлено: 30 Июля, 2011 - 08:22:52
Новичок Покинул форум Сообщений всего: 14 Дата рег-ции: Июль 2011 Помог: 0 раз(а)	ок это я сделаю не проблема, так что же с айпи то для исходящих запросов делать

LIME	Отправлено: 30 Июля, 2011 - 12:17:37
Активный участник Покинул форум Сообщений всего: 10732 Дата рег-ции: Нояб. 2010 Помог: 322 раз(а)	$proxy='giotto.dut.ac.za:80' curl_setopt($ch,CURLOPT_PROXY,$proxy); $proxy будете менять в цикле или случайно выбирать из файла или где они там у вас для каждого запроса новый прокси

sharp-net	Отправлено: 30 Июля, 2011 - 13:51:15
Новичок Покинул форум Сообщений всего: 14 Дата рег-ции: Июль 2011 Помог: 0 раз(а)	вот спасибо дядьки =) особенно лайму...получмлось так - PHP: скопировать код в буфер обмена <?PHP $url = 'http://2ip.ru/'; // инициализация сеанса $ch = curl_init(); $ip_arr = array(); $ip_arr[] = '216.157.222.84:80'; $ip_arr[] = '109.238.1.177:3128'; $ip_arr[] = '110.136.162.37:8080'; $ip_arr[] = '110.137.40.74:3128'; $ip_arr[] = '110.138.208.142:8080'; $ip_arr[] = '110.35.80.162:8080'; $ip_arr[] = '110.8.253.100:80'; $ip_arr[] = '113.160.16.78:3128'; $ip_arr[] = '113.160.16.82:3128'; $ip_arr[] = '114.32.104.3:8080'; $ip_arr[] = '114.80.164.228:8080'; $ip_arr[] = '115.108.53.226:6588'; $ip_arr[] = '115.42.158.18:8080'; $ip_arr[] = '116.66.206.161:8080'; $ip_arr[] = '116.66.207.70:8080'; $ip_arr[] = '117.102.101.219:8080'; $ip_arr[] = '117.102.91.6:8080'; $ip_arr[] = '118.122.87.24:80'; $ip_arr[] = '118.122.88.2:80'; $ip_arr[] = '118.122.88.5:80'; $ip_arr[] = '118.122.88.6:80'; $ip_arr[] = '118.175.12.178:3128'; $ip_arr[] = '118.175.14.108:3128'; $ip_arr[] = '118.175.2.75:8080'; $ip_arr[] = '118.175.22.69:8080'; $ip_arr[] = '118.175.3.242:3128'; $ip_arr[] = '118.228.148.52:3128'; $ip_arr[] = '118.69.224.112:80'; $ip_arr[] = '118.96.110.206:3128'; $ip_arr[] = '118.96.136.126:8080'; $ip_arr[] = '118.96.137.5:3128'; $ip_arr[] = '118.96.138.67:3128'; $randip = $ip_arr[rand(0,sizeof($ip_arr)-1)]; echo $randip; curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_HEADER, 0); curl_setopt($ch,CURLOPT_PROXY,$randip); //curl_setopt($ch, CURLOPT_TIMEOUT, 10); $result = curl_exec($ch); curl_exec($ch); curl_close($ch); ?> только теперь надо проверить на живучесть проксей и на всякую анонимность =)

sharp-net	Отправлено: 05 Августа, 2011 - 10:49:33
Новичок Покинул форум Сообщений всего: 14 Дата рег-ции: Июль 2011 Помог: 0 раз(а)	помогите дядьки еще разок плиз (записей в proxy.txt 48000(это после проверки на совпадение)) все почти завелось, проблема в том: 1. Maximum number of open connections reached. Maximum number of open connections reached. 2. Apache Server at www[dot]fast-const[dot]ru Port 8080 Service Temporarily Unavailable The server is temporarily unable to service your request due to maintenance downtime or capacity problems. Please try again later. 3. Fatal error: Maximum execution time of 600 seconds exceeded in Z:\home\pars\www\ip.php on line 32 Вопросы: 1. В курле закрывать сессии надо постоянно что ли? 2. Как поставить таймаут чтобы не видет этой мессаги? (или как это решить, не верится мне что это связь тупит) 3. Как поставить таймауты сек на 5 чтоли - а то и так раздвинул на 6000 и не хватает - значит косячу. 4. Проверка на анонимность у меня через $_SERVER[] Возможно локально както это сделать или полюбасу нужен внешний ип чтобы апач знал с какого ип к нему логинятся? + использую не свою проверку т.к. сайта пока нету => и айпи тоже... есть ли еще такие сервис чтобы я не долбил один и тот же а хотя бы по очереди

kindman	Отправлено: 21 Июня, 2012 - 13:45:33
Новичок Покинул форум Сообщений всего: 1 Дата рег-ции: Июнь 2012 Помог: 0 раз(а)	OrmaJever пишет: http ://php[dot]su/lessons/?lesson_11 curl_setopt() CURLOPT_PROXY Ссылка полезная , нашел то что мне нужно

EuGen	Отправлено: 21 Июня, 2012 - 13:52:18
Профессионал Покинул форум Сообщений всего: 9095 Дата рег-ции: Июнь 2007 Откуда: Berlin Помог: 707 раз(а)	С Новым Годом ----- Есть в мире две бесконечные вещи - это Вселенная и человеческая глупость. Но насчет первой .. я не уверен.

Поиск в теме | Версия для печати

Страниц (1): [1]

Сейчас эту тему просматривают: 0 (гостей: 0, зарегистрированных: 0)

« Вопросы новичков »

Все гости форума могут просматривать этот раздел.
Только зарегистрированные пользователи могут создавать новые темы в этом разделе.
Только зарегистрированные пользователи могут отвечать на сообщения в этом разделе.