| ingvarr | (58423) Вне сайта Дата: 08.12.2009, 02:07 | Сообщение № 1
|
admin
| Последние 2 дня очень увеличилась активность поисковых ботов на сайте. Это хорошо заметно на скриншоте.
|
| |
|
|
| ingvarr | (58423) Вне сайта Дата: 08.12.2009, 02:13 | Сообщение № 2
|
admin
| Вчера бот маил.ру загрузил 9524 страницы сайта, а позавчера 9813 страниц. Получается, что он за эти 2 дня загрузил все страницы моего сайта (их сейчас около 20 000 ). Яндекс тоже повысил активность. За вчерашний день он загрузил 4680 страниц с моего сайта. Наглость проявляет бот Бегуна. Я ему уже давненько закрыл доступ к сайту в файле robots.txt Сначала после закрытия доступа он перестал загружать страницы моего сайта, а недавно опять начал.
|
| |
|
|
| russianbrides | (301) Вне сайта Дата: 08.12.2009, 04:02 | Сообщение № 3
|
Генерал-майор
Группа: Депутат
Репутация: 62
Награды: 6
Замечания: 0%
| Quote (ingvarr) Я ему уже давненько закрыл доступ к сайту в файле robots.txt А почему? Quote (ingvarr) Последние 2 дня очень увеличилась активность поисковых ботов на сайте. Не знаю, как в твоем случае, но по моим наблюдениям, боты так начинают активничать каждый раз, когда появляется много нового материала. Может, ты в последние дни как раз добавлял что-то, интересное для них. 
|
| |
|
|
| ingvarr | (58423) Вне сайта Дата: 08.12.2009, 04:06 | Сообщение № 4
|
admin
| Quote (russianbrides) А почему? А нефиг ему по моему сайту лазить. Это бот рекламной сети бегун (баннер юкоза в основном из его рекламы состоит). Бот определяет что тематика моего сайта сотовая связь и показывает рекламу всяких мобильных лохотронов (читай чужие смс, определи местонахождение мобильного). а мне это не надо.
|
| |
|
|
| ingvarr | (58423) Вне сайта Дата: 15.12.2009, 02:01 | Сообщение № 5
|
admin
| А 14 декабря апорт с ума сошел. За сутки загрузил 18394 страницы. Если майл.ру примерно столько загрузил за 2-е суток, то апорт загрузил за сутки.
|
| |
|
|
| russianbrides | (301) Вне сайта Дата: 02.01.2010, 19:24 | Сообщение № 6
|
Генерал-майор
Группа: Депутат
Репутация: 62
Награды: 6
Замечания: 0%
| Quote (ingvarr) А 14 декабря апорт с ума сошел. За сутки загрузил 18394 страницы. Не думаю, что это плохо. Пусть и дальше сходит с ума. 
|
| |
|
|
| ingvarr | (58423) Вне сайта Дата: 02.01.2010, 19:39 | Сообщение № 7
|
admin
| Quote (russianbrides) Не думаю, что это плохо. Я и не говорил что это плохо. просто это немного странно.
|
| |
|
|