Публичный саппорт: Обуздайте робота mail.ru!

Научите кто-нибудь mail.ru писать краулеров. За неполные сутки к одному сайту — более 250,000 обращений с nipple4.mail.ru (217.69.133.31). Интенсивность запросов — больше десятка в секунд„===>

217.69.133.31 — - [06/May/“:40:44 +0400] «GET / HTTP/1.0» 200 37466 «-" «Mozilla/5.0 (compatible; Mail.RU/2.0)»

Лучшие комментарии

Добавить 2 комментария