Форумы портала PHP.SU :: Версия для печати :: как еще гугл узнает о новых сайтах

1. DlTA - 10 Октября, 2012 - 02:42:05 - перейти к сообщению

как все началось:
поднял для проведения тестирования у себя на компе несколько сайтов, по опредленным адресам эти сайты доступны и в инет, и вот проводя как то чистку мусора обнаружил постоянно появляющиеся новые сессии, стал смотреть откуда они берутся,
запросы идут с IP 66.249.76.194, к сожалению логи не показывают доп. инфы о том кто именно щимится и так усиленно сканит контент, на тестовых сайтах которые НИГДЕ не светятся, не имеют ссылок для перехода на них и т.д. из вне.
поиск по IP выдал только какие то страницы с ошибками, в которых (судя по предложенному краткому тексту) был указан IP запросившего (бота поисковика)

на основе этого всего и делается вывод, что гугля очень внимательно относится ко всему, что вы вводите в адресную строку.
(Добавление)
немного покрутив

[HTTP_USER_AGENT] => Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

2. Мелкий - 10 Октября, 2012 - 09:24:19 - перейти к сообщению

IP гуглу и принадлежит, что по whois узнаётся.

Какой браузер? Только не говорите, что хром - чему же вы тогда удивляетесь?
Всякие бары; может вы случайно перешли на другой сайт - и реферер схватила гугл-аналитика.

3. Zuldek - 10 Октября, 2012 - 09:30:15 - перейти к сообщению

Хром и все что на гуглевской сборке webkita стучит в google получше чем ie стучит мелкомягким.
Иначе смысл делать бесплатные браузеры.

4. DlTA - 10 Октября, 2012 - 09:48:58 - перейти к сообщению

Мелкий пишет:

Только не говорите, что хром

ну а кто ж еще.

5. DeepVarvar - 10 Октября, 2012 - 11:59:18 - перейти к сообщению

Ох уж эта проприетарщина...