Login
robots.txt
308 просмотров
Перейти к просмотру всей ветки
in Antwort helper2008 16.01.13 09:51
В ответ на:
Нужно запретить все файлы вида
Нужно запретить все файлы вида
Если я не ошибаюсь, то robots.txt это больше как лёгкое руководство для поведения ботов.
И есть некоторые, которые этих руководств не придерживаются.
Если хочешь действительно запретить, то по моему лучше через .htaccess