СоНоты

Судя по консоли вебмастера, Яндекс перестал считать URL, закрытые в robots.txt, за ошибки сайта, – и года не прошло.

Теперь осталось убирать из ошибочных URL со статусом 404, на которые нет ссылок со страниц сайта (т.е. те, которые найдены не по внутренней ссылке в терминах той же консоли вебмастера).

Popularity: 14%

Похожие записи

• Яндекс и robots.txt
• Яндекс и robots.txt
• Особенности индексирования: Яндекс vs Google
• Host: и Яндекс
• Немного когнитивности

В Мой Мир