Search by WMSN

Google и Яндекс напали на домен и жестоко его ботят.. по 30 запросов в минуту. Crawl-delay в Атаку

Answers:

У Гугла это называется Crawl rate

jkeks, да, но он не в роботсе прописывается. (

Яндекс на Crawl-delay последнее время начал забивать. Иногда валит так, что сервер валит.

Mik Foxi, неделю назад одну из впс-ок грузили процентов на 80 почти 6 часов

Божешь ты мой, аж 30 запросов в минуту.