Февраль
1

Прекратить индексацию

04.03.2007 12:16 badguy

Вот вылезли доры, все пучком.
Но подлый спайдер уже милиион раз прошелся по ним снова и снова. Сжирая ресурсы.

Как то можно прекратить это безобразие ?

МСН заебал
недавно я осознал что я знаю что ничего не знаю :(
Сюда льем НЕОПЛАЧИВАЕМЫЙ адалт трафик. Даже турки, китайцы и индусы приносят деньги


04.03.2007 12:36 ubl

роботс.ткст?

Да и в метатегах можно частоту индексации задать, только не факт, что оно так и будет
Не курю и мало пью.


04.03.2007 21:44 umaxsc

Можно например клоакинг сделать по юзер-агенту с помощью ModRewrite


04.03.2007 21:59 [b

Сообщение от [b
Цитата[/b] (umaxsc @ Мар 05 2007,00:44)]Можно например клоакинг сделать по юзер-агенту с помощью ModRewriteИ потом сразу прямым ходом в баню, сейчас мсн ходит по дорам еще и своим хитроботом, поэтому в бан уйдет дор сразу, имхо, через роботс.тхт, времено запретить ходить по дорам.


04.03.2007 23:01 5hark

у меня мсн третий месяц принюхивается никак не разгонится, можешь мне его редиректить по юзер агенту
Колоти бабло, зарабатывай на онлайн казино и покере


05.03.2007 11:22 [b

Сообщение от [b
Цитата[/b] (5hark @ Мар 05 2007,02:01)]у меня мсн третий месяц принюхивается никак не разгонится, можешь мне его редиректить по юзер агенту +1 не отказался бы от прихода мсн-бота, а то вроде основные все уже отметились, а этого нету, хоть приглашай официальным приглашением.


05.03.2007 11:43 bubuta

Оно конечно можно МСНу запретить ходить по дорам, тож про это думал. Но побоялся ответной реакции.
AnonymouSchannel
Лучший хостинг для Вашего фида – hqhost


05.03.2007 12:16 beaver1971

2 badguy
странички на html или php, динамические или статические?
Обманешь google – будешь в топе. Забанит google – будешь в ж…
Бесплатно: русские кейворды


05.03.2007 22:56 badguy

Динамические в том то и дело
недавно я осознал что я знаю что ничего не знаю :(
Сюда льем НЕОПЛАЧИВАЕМЫЙ адалт трафик. Даже турки, китайцы и индусы приносят деньги


12.03.2007 23:02 badguy

Таки прав был дедушка. мсн и динамика великое зло.
недавно я осознал что я знаю что ничего не знаю :(
Сюда льем НЕОПЛАЧИВАЕМЫЙ адалт трафик. Даже турки, китайцы и индусы приносят деньги


0