Февраль
1

Как не пустить гугль-бота на хост? не robots.txt

19.09.2007 07:11 *white*

Слышал, что robots.txt уже не помогает. Может кто знает другие методы, чтобы бот на хост не приходил?


19.09.2007 09:12 MO $$$

пароль поставить
о}{уительный }{остинг


19.09.2007 09:25 jannyRodary

с htaccess можно поигратся
Интересно про футбол!


19.09.2007 09:51 iamliss

Что значит не помогает? Кто тебе такую х.. сказал. Всё работает как и работало.
конвертим варез тут


19.09.2007 11:51 DmR

А помоему прав ТС. Я ставил месяц назад запрет на десяток файлов. Формат robots.txt стопудово правильный. так же в выдаче висят, как и прежде.

К тому же отказывается Не кешировать.

прописал три варианта метатегов для запрета кеширования.
META HTTP-EQUIV="Pragma" CONTENT="no-cache">
<META HTTP-EQUIV="Cache-Control" CONTENT="no-cache">
и еще один.
поставил ссылок, чтоб быстрее увидел изменения. И фигу.
В выдаче как обычно , с пометкой – Cached


19.09.2007 11:55 [b

Сообщение от [b
Цитата[/b] (DmR @ Сен 19 2007,06:51)]А помоему прав ТС. Я ставил месяц назад запрет на десяток файлов. Формат robots.txt стопудово правильный. так же в выдаче висят, как и прежде.

К тому же отказывается Не кешировать.

прописал три варианта метатегов для запрета кеширования.
META HTTP-EQUIV="Pragma" CONTENT="no-cache">
<META HTTP-EQUIV="Cache-Control" CONTENT="no-cache">
и еще один.
поставил ссылок, чтоб быстрее увидел изменения. И фигу.
В выдаче как обычно , с пометкой – Cached+1
Интересно про футбол!


19.09.2007 12:43 *white*

Дело в том, что на одни хосты их не пускает, на другие им пох – лезут, как пить дать. Может тут где-то глубоко в конфигах нужно что-то прописать. Короче хз.


0