Февраль
1

Активность msnbot/1.0 На нескольких серверах обвал активности

20.10.2007 08:28 Сarlos

Начал недавно выводить новые партии доров, и соответственно активно мониторить логи после спама.

Выяснилось что еще до начала спама активность мснбота на старых доменах резко снизилась раз в 20 по сравнению со средним значением.

Новые доры так же не индексируются, при весьма сильном спаме бот приходит 0-2 раза в сутки на домен.

Проверил еще 2 сервера – там такой же обвал бота на старых доменах. Причем обвал произошел 12-13 15-16 числах октября. Т.е. на разных серверах немного в разное время но одинаково резко.

Поставил в спам доры на совсем новом сервере, с новыми ипами, на второй день смотрю и вижу что бот и там тухлит.

Не знаю прям что и делать. Есть гипотеза что мсн с новым движком решил банить подсети ip (XXX.YYY.ZZZ.*) где он раньше (есть и полгода) банил доры.

При этом не все ip забанились, неамериканские адреса нормально индексируются, и доры повылазили как надо, сделанные по той же технологии и с таким же спамом.

У кого нибудь наблюдается похожая ситуация?


20.10.2007 11:36 SummerInParis

Похожие симптомы, возможно заморозили бота после катастрофического увеличения индекса, проверяем варианты.


21.10.2007 10:55 Сarlos

В продолжении темы, сегодня проверял статистику, оказалось что не смотря на то что мснбот заходит по 0-4 раза в сутки на домен, сайты в индексе мсна по 1-4 страницы, и эти страницы в серпе на 1-3 позициях по низкочастотникам.
Вобще странно получается, если мсн забанил ипы, то зачем туда все еще ходит, и зачем тем более выкладывает в индекс и в серп.


21.10.2007 11:16 SmartJohn

Значит твоя предпосылка о бане неверна и снижение активности связана с др причинами


21.10.2007 11:33 Сarlos

Я бы и рад) но пока у меня нормально индексируется только неамериканский сервер(
Если бы были еще у кого то подобные случаи в это время то можно было бы подумать что это у мсн какая то передышка. Такое бывало за последний год пару раз, когда он ничего не делал и ходил совсем вяло по сайтам. Но никто не отписывается пока(
Через несколько дней буду на серверах где никогда не было доров пробовать заделать немного и проспамить, может там просрется.


0