Покинул форум
Сообщений всего: 355
Дата рег-ции: Нояб. 2011
Помог: 3 раз(а)
Занимался кто нить когда нить парсингом форумов ?. Посоветуйте как лучше, что бы не забанили, может у кого наработки остались, буду благодарен.
LIME
Отправлено: 09 Ноября, 2011 - 18:52:52
Активный участник
Покинул форум
Сообщений всего: 10732
Дата рег-ции: Нояб. 2010
Помог: 322 раз(а)
difight при парсинге не могут банить
Данил_123
Отправлено: 09 Ноября, 2011 - 19:05:58
Участник
Покинул форум
Сообщений всего: 1026
Дата рег-ции: Июнь 2011 Откуда: rostov
Помог: 9 раз(а)
----- http://mysitecost.ru
difight
Отправлено: 09 Ноября, 2011 - 19:15:07
Посетитель
Покинул форум
Сообщений всего: 355
Дата рег-ции: Нояб. 2011
Помог: 3 раз(а)
LIME пишет:
difight при парсинге не могут банить
Разве? Меня чё то уверяют что могут, мол как то лучше парсить по частям постранично (Добавление)
Данил_123 пишет:
клац
Бонально, парсить я парсил сайты, мне интересный сами нюансы при парсинге форумов, может какие специальные готовые инструменты, решения есть что бы велосипед не изобретать
LIME
Отправлено: 09 Ноября, 2011 - 19:28:18
Активный участник
Покинул форум
Сообщений всего: 10732
Дата рег-ции: Нояб. 2010
Помог: 322 раз(а)
difight а какой еще вариант?))
скачать все страницы в массив?
вы начните если забанят помогу
difight
Отправлено: 09 Ноября, 2011 - 19:32:08
Посетитель
Покинул форум
Сообщений всего: 355
Дата рег-ции: Нояб. 2011
Помог: 3 раз(а)
LIME пишет:
difight а какой еще вариант?))
скачать все страницы в массив?
вы начните если забанят помогу
Да я не про парсинг данного форума я в принципе спрашиваю))
LIME
Отправлено: 09 Ноября, 2011 - 19:36:23
Активный участник
Покинул форум
Сообщений всего: 10732
Дата рег-ции: Нояб. 2010
Помог: 322 раз(а)
и я в принципе
если боитесь пользуйте прокси
curl и пркси меняйте в цикле
хватит нескольких (Добавление)
будет медленнее
difight
Отправлено: 09 Ноября, 2011 - 19:54:24
Посетитель
Покинул форум
Сообщений всего: 355
Дата рег-ции: Нояб. 2011
Все гости форума могут просматривать этот раздел. Только зарегистрированные пользователи могут создавать новые темы в этом разделе. Только зарегистрированные пользователи могут отвечать на сообщения в этом разделе.