Переписал проверялку доступности сайтов каталога «Весь интернет Сочи» в многопроцессном варианте, заодно увеличил таймаут проверки одного ресурса с 35 секунд до 3 минут. В результате "ожило" около 70 сайтов! Ну нифигасе, оказывается примерно 8% сайтов из сочинского инета не хватает 35 секунд, чтобы ответить на HEAD запрос к основной странице сайта. Интересно, чем эти сайты занимаются ? 🙂
Добавка. Ещё одна гипотеза об этих сайтах: эти сайты работают только в рабочее время, пришли на работу, включили компы, - сайт работает, ушли с работы, компы выключили - сайт не работает.