Если вы умеете генерить дорвеи, то для вас не секрет, что Яндекс повернулся задом к лесу и принялся мочить дорвеи (в сортире, очевидно).
Одновременно с теми же фанфарами разворачивается новый сервис поиска по блогам и прочим фидам. И у этого поиска есть одно родовое пятно, -- бот, выкачивающий фиды, не соблюдает robots.txt, -- нет это не ошибка, это позиция разработчика этого поиска, Романа Иванова, известного в блогосфере под ником kukutz. Ну ладо бы не соблюдал, ничем не отличаясь от обычного пользователя, но... Даже если на фид никто в Яндекс.Ленте не подписан, бот будет посещять этот фид по нескольку раз в сутки, примерно обращения идут дуплетом раз в три часа.
Т.е. существует вид файлов, которые Яндекс очень любит, и весьма часто, независимо от того, читает ли это хоть один человек. Т.е. о чём скоро будут "говорить" в блогосфере согласно Яндекс.Блогам ? Правильно, о ксанаксе и фентермине 🙂