Login
Яндекс?
325 просмотров
Перейти к просмотру всей ветки
in Antwort Валидол 11.01.13 19:06, Zuletzt geändert 11.01.13 19:54 (project33)
а ты чего собственно добиваешься? заблокировав адрес бота ты совсем ему кислород перекрыл, а так будет заходить иногда, смотреть на robots.txt на случай если ты передумаешь когда-нибудь...
если че, можещь юзать параметр Crawl delay.
если че, можещь юзать параметр Crawl delay.
В ответ на:
Позволяет указать индексирующему роботу минимальный промежуток времени (в секундах) между обращениями к страницам сайта. Этот параметр полезен для крупных проектов, содержащих десятки тысяч страниц и более. Поисковый робот Яндекса при индексировании может создать на такой сайт большую нагрузку, что может вызвать перебои и задержки в работе сайта, поэтому, возможно, вам следует ограничить количество обращений в секунду. Например, директива Crawl-delay: 2 укажет роботу, что он должен выжидать 2 секунды между обращениями к серверу.
Позволяет указать индексирующему роботу минимальный промежуток времени (в секундах) между обращениями к страницам сайта. Этот параметр полезен для крупных проектов, содержащих десятки тысяч страниц и более. Поисковый робот Яндекса при индексировании может создать на такой сайт большую нагрузку, что может вызвать перебои и задержки в работе сайта, поэтому, возможно, вам следует ограничить количество обращений в секунду. Например, директива Crawl-delay: 2 укажет роботу, что он должен выжидать 2 секунды между обращениями к серверу.
Продвижение сайтов, реклама: https://www.pro33.net