Warning: Cannot use a scalar value as an array in /home/admin/public_html/forum/include/fm.class.php on line 757

Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/include/fm.class.php on line 770

Warning: Invalid argument supplied for foreach() in /home/admin/public_html/forum/topic.php on line 737
Форумы портала PHP.SU :: Mod Rewrite и боты поисковики

 PHP.SU

Программирование на PHP, MySQL и другие веб-технологии
PHP.SU Портал     На главную страницу форума Главная     Помощь Помощь     Поиск Поиск     Поиск Яндекс Поиск Яндекс     Вакансии  Пользователи Пользователи


 Страниц (1): [1]   

> Без описания
Joe
Отправлено: 14 Ноября, 2010 - 15:26:35
Post Id



Новичок


Покинул форум
Сообщений всего: 18
Дата рег-ции: Окт. 2010  


Помог: 0 раз(а)




Появилась потребность посылать поисковиков на определенную страницу сайта..
К сожалению, боты не видят контента, сгенерированного с помощью JavaScript, приходится мудрить.. В общем, делаю так..

CODE (htmlphp):
скопировать код в буфер обмена
  1. RewriteEngine On
  2. RewriteBase /
  3. RewriteCond %{HTTP_USER_AGENT} ^yandex.* [NC,OR]
  4. RewriteCond %{HTTP_USER_AGENT} ^googlebot.* [NC,OR]
  5. RewriteCond %{HTTP_USER_AGENT} ^.*gaisbot.* [NC,OR]
  6. RewriteCond %{HTTP_USER_AGENT} ^rambler.* [NC,OR]
  7. RewriteCond %{HTTP_USER_AGENT} ^aport.* [NC,OR]
  8. RewriteCond %{HTTP_USER_AGENT} ^metacrawler.* [NC,OR]
  9. RewriteCond %{HTTP_USER_AGENT} ^msnbot.* [NC,OR]
  10. RewriteCond %{HTTP_USER_AGENT} ^.*crawler.* [NC,OR]
  11. RewriteRule ^/bots.php?$ [L,R]

Результатом сего кода является перенаправление всех, а не только ботов)

Помогите с решением данной задачки Растерялся
 
 Top
JustUserR
Отправлено: 14 Ноября, 2010 - 19:08:38
Post Id



Активный участник


Покинул форум
Сообщений всего: 8715
Дата рег-ции: Июнь 2009  


Помог: 17 раз(а)




Joe пишет:
К сожалению, боты не видят контента, сгенерированного с помощью JavaScript, приходится мудрить.. В общем, делаю так
Для обеспечения предварительной обработки пользовательских запросов к целевому ресурсу без использования возможностей модуля mod_rewrite - целесообразно применение решения с включением управляющего CGI-скрипта - выполнение которого основывается на передаче парамтеров клиентских запросов по методу alias-инга и дейсвенного перенаправления - и последующего исполенения web-содержимого в PHP-интерпретаторе или генерации специального документа


-----
Сделать можно все что угодно - нужно только старание, терпение и хороший поисковик Улыбка
Безлимитный web-хостинг от 15 рублей за 40 МБ дискового пространства - http://ihost[dot]oks71[dot]ru/
 
 Top
vasa_c
Отправлено: 14 Ноября, 2010 - 21:00:17
Post Id


Новичок


Покинул форум
Сообщений всего: 31
Дата рег-ции: Июнь 2009  


Помог: 0 раз(а)




Единственное чем решается подобная проблема на 100% и без излишнего мудрения - ненавязчивый JavaScript, при котором основной контент доступен и без JS.
 
 Top
Joe
Отправлено: 14 Ноября, 2010 - 21:19:15
Post Id



Новичок


Покинул форум
Сообщений всего: 18
Дата рег-ции: Окт. 2010  


Помог: 0 раз(а)




JustUserR пишет:
Для обеспечения предварительной обработки пользовательских запросов к целевому ресурсу без использования возможностей модуля mod_rewrite - целесообразно применение решения с включением управляющего CGI-скрипта - выполнение которого основывается на передаче парамтеров клиентских запросов по методу alias-инга и дейсвенного перенаправления - и последующего исполенения web-содержимого в PHP-интерпретаторе или генерации специального документа

Для обеспечения предварительной обработки пользовательских запросов к целевому ресурсу, меня вполне устраивают возможности модуля mod_rewrite) Включение управляющего CGI-скрипта в моем случае не целесообразно)
vasa_c пишет:
Единственное чем решается подобная проблема на 100% и без излишнего мудрения - ненавязчивый JavaScript, при котором основной контент доступен и без JS.

У меня сайт использует технологию AJAX, с помощью которой подгружается весь контент, по этому JavaScript обязателен) Без не навязчивого JavaScripta не добиться полноценной динамики контента на сайте)


Rewrite все еще актуально)

---

Решение найдено средствами php в наиболее оптимальной форме, всем спасибо)
А так же подсказали рабочий вариант с реврайтом
CODE (htmlphp):
скопировать код в буфер обмена
  1.  
  2. RewriteEngine On
  3. RewriteCond %{HTTP_USER_AGENT} ^.*(google|yahoo|msnbot|ia_archiver|spider|crawler|altavista|baidu|aspseek|cnsearch|yandex|rambler).* [NC]
  4. RewriteRule .* bots.php [L]
  5.  

(Отредактировано автором: 15 Ноября, 2010 - 01:32:30)

 
 Top
Страниц (1): [1]
Сейчас эту тему просматривают: 0 (гостей: 0, зарегистрированных: 0)
« Программирование на PHP »


Все гости форума могут просматривать этот раздел.
Только зарегистрированные пользователи могут создавать новые темы в этом разделе.
Только зарегистрированные пользователи могут отвечать на сообщения в этом разделе.
 



Powered by PHP  Powered By MySQL  Powered by Nginx  Valid CSS  RSS

 
Powered by ExBB FM 1.0 RC1. InvisionExBB