Войти
Каталожный блог
Боты Яндекса забегали
#1 Последние пару дней за сутки забирают около 20% страниц сайтов, при том что раньше брали около 5%. Заметил еще одну прикольную вещь — складывается впечатление, что Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots) на каждый сайт ходит с соответствующего spiderNN.yandex.ru хоста. Проверено двухнедельной статистикой.
NULL, 2010-08-18 16:29