Февраль
1

Как забанить все кроме гугл бота ?

07.04.2007 05:56 badguy

Как забанить все кроме гугл бота ?
Имеется в виду robots.txt
Или
Возможно имеется другое комплексное решение ?
недавно я осознал что я знаю что ничего не знаю :(
Сюда льем НЕОПЛАЧИВАЕМЫЙ адалт трафик. Даже турки, китайцы и индусы приносят деньги


07.04.2007 06:10 Huligan

Создаёш файл .htaccess и запихиваеш туда ип ботов которые нада забанить в нутри прописываеш вот так,
order allow,deny
deny from 202.108.22.132
deny from 122.152.128.14
deny from 193.47.80.46
allow from all

и ложеш фаил через фтп в корень, вроде не чего не забыл.


07.04.2007 10:02 lalala

надо allow для всех ДЦ – это охуеть можно
проще по user-agent смотреть
на наличие слова google
продам google.com, дорого


07.04.2007 10:23 badguy

Шото ребята вы шаманите. Оказывается все намного проще.
С любым ботоми. По сертификации надо писать так.

User-agent: *
Disallow: /

User-agent: Googlebot
Disallow:

Теперечки вопрос если например добавить строчку
User-agent: msnbot
Disallow:

будет ли разрешение только для гугля и мсна ? По логике должно быть. Кто проверял ?
недавно я осознал что я знаю что ничего не знаю :(
Сюда льем НЕОПЛАЧИВАЕМЫЙ адалт трафик. Даже турки, китайцы и индусы приносят деньги


0