"Скорость обхода" или об изменениях в учёте директивы Crawl-delay

17:52 15.02.2018
В Яндекс.Вебмастере появился новый инструмент — «Скорость обхода», который находится в разделе «Индексирование». Этот инструмент позволяет регулировать, как часто Яндекс может делать запросы к вашему сайту, то есть регулировать скорость обхода вашего сайта со стороны поисковых роботов. По умолчанию мы будем подбирать максимальную скорость для конкретного сайта, учитывая допустимые нагрузки для вашего сервера.Проанализировав письма за последние два года в нашу поддержку по вопросам индексирования, мы выяснил...
  1,081