Февраль
1

Лимит заходов бота (существует ли?)

17.03.2007 08:44 beaver1971

Есть сервер, на нем несколько сайтов.
Ходит гугл-бот, яха-бот, мсн-бот.
По яхе и мсн статистики пока не набрал, но думаю, что там примерно так-же.
Подозреваю, что существует лимит заходов гугловского бота на один айпишник с одного айпишника. В настоящий момент ходят два гуглбота, попеременно (меняются раз в несколько суток), с интервалом около 10-15 секунд.
Отсюда вывод: быстрее будет проиндексированно множество страниц на том сервере, на котором меньше сайтов?
Вообще, как ускорить индексацию страничек? И как заставить бота переиндексировать старые странички?
Обманешь google – будешь в топе. Забанит google – будешь в ж…
Бесплатно: русские кейворды


0