Warning: Cannot use a scalar value as an array in /home/admin/public_html/forum/include/fm.class.php on line 757

Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/include/fm.class.php on line 770

Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/topic.php on line 737
Форумы портала PHP.SU :: Как можно тормознуть бинг бота?

 PHP.SU

Программирование на PHP, MySQL и другие веб-технологии
PHP.SU Портал     На главную страницу форума Главная     Помощь Помощь     Поиск Поиск     Поиск Яндекс Поиск Яндекс     Вакансии  Пользователи Пользователи


 Страниц (1): [1]   

> Описание: Как можно тормознуть бинг бота?
anton_177
Отправлено: 02 Марта, 2015 - 08:01:56
Post Id


Новичок


Покинул форум
Сообщений всего: 2
Дата рег-ции: Февр. 2015  


Помог: 0 раз(а)




Он невменяемый, в секунду от двух и бывает до десяти запросов, а еще пользователи и другие боты, сервер ложится.
написал в роботе
User-agent: msnbot
Crawl-delay: 10
как они у себя пишут http://www[dot]bing[dot]com/community/si[dot][dot][dot]wler-msnbot[dot]aspx
а ему похоже плевать на это.
Может у кого была похожая проблема?
 
 Top
Ch_chov
Отправлено: 02 Марта, 2015 - 08:33:53
Post Id



Постоянный участник


Покинул форум
Сообщений всего: 2121
Дата рег-ции: Июль 2008  
Откуда: из города


Помог: 90 раз(а)




http://stackoverflow[dot]com/questio[dot][dot][dot]crawling-my-site

Возможно имя бота другое надо указать
http://www[dot]bing[dot]com/webmaster/he[dot][dot][dot]ing-use-8c184ec0

Вообще банить поисковых ботов конечно сомнительный поступок.
 
 Top
Страниц (1): [1]
Сейчас эту тему просматривают: 0 (гостей: 0, зарегистрированных: 0)
« Работа с сетью »


Все гости форума могут просматривать этот раздел.
Только зарегистрированные пользователи могут создавать новые темы в этом разделе.
Только зарегистрированные пользователи могут отвечать на сообщения в этом разделе.
 



Powered by PHP  Powered By MySQL  Powered by Nginx  Valid CSS  RSS

 
Powered by ExBB FM 1.0 RC1. InvisionExBB