Host: и Яндекс
24 Ноябрь 2009 01:19 by MaximeЭксперимент с убиранием директивы Host: из robots.txt в секции для бота Яндекс окончился неудачно, для сайта.
То, что Яндекс “расклеит” зеркала, не было так уж неожиданным. Но вот почему в индексе из двух копий одних и тех же страниц остаются копии сайтов с меньшим ТИЦ (и соответственно на более низких позициях) и с большим временем отклика, – непонятно. Похоже из двух копий страницы на зеркалах Яндекс выбирает то зеркало, которое имеет IP, географическая привязка которого совпадает с георграфической привязкой сайта, а не тот, который отдает контент быстрее и чье доменное имя имеет и больший ТИЦ и больший PR.
Google же прекрасно справляется с “зеркалами” даже без директивы Host:.
Popularity: 17% [?]
Похожие записи
- Яндекс и robots.txt
- Яндекс тормозит с обновлениями индекса
- Host: www.sochi2014.com
- Яндекс и robots.txt
- Google AdSense vs Яндекс.Директ