Выяснилось, что виновато кэширование документов в mod_proxу у Апача 1.3, - при определённых условиях закэшированый контент отдаётся без проверки совпадения Accept-Encoding у текущего запроса и закэшированого документа. Заодно это выявило некоторую отсталость в развитии бота Яндекса, - он не поддерживает сжатие контента при передаче. Боты, которые поддерживают эту фичу, проблем от этого бага не испытывают.
Выяснилось, что виновато кэширование документов в mod_proxу у Апача 1.3, - при определённых условиях закэшированый контент отдаётся без проверки совпадения Accept-Encoding у текущего запроса и закэшированого документа. Заодно это выявило некоторую отсталость в развитии бота Яндекса, - он не поддерживает сжатие контента при передаче. Боты, которые поддерживают эту фичу, проблем от этого бага не испытывают.
Засамбмитил баг-репорт и фикс к нему:
http://issues.apache.org/bugzilla/show_bug.cgi?id=40646