Публичный саппорт: Обуздайте робота mail.ru!

Научите кто-нибудь mail.ru писать краулеров. За неполные сутки к одному сайту - более 250,000 обращений с nipple4.mail.ru (217.69.133.31). Интенсивность запросов - больше десятка в секунду.

217.69.133.31 - - [06/May/2012:23:40:44 +0400] "GET / HTTP/1.0" 200 37466 "-" "Mozilla/5.0 (compatible; Mail.RU/2.0)"

Лучшие комментарии

Добавить 2 комментария