Search by WMSN

Гуглобот напал на мой маленький сервер с дорами. что с ним делать? на crawl-delay я так понимаю, он не реагирует? как его еще приструнить?

Answers:

или подождать пока уйдет? или он не уйдет и такая нагрузка теперь постоянно будет? (

crawlrate в Вебмастере есть, ползунком надо подвигать, а для htaccess опции нету.

jkeks, так если я в один вебмастер аккаунт 150 сайтов добавлю, то мне потом Гугл всю пачку доров спалит и забанит же...

У себя сделал антинагрузочню систему. Не более чем 1 генерация за N секунд на 1 интерфейс. Вот вчера сдуру сделал 1 генерация/1 сек, так LA взлетел до 170, вернул обратно 20 сек, LA вернулся в свои нормальные показатели.

Inspector, ты других ботов закрой , нагрузка упадет в разы, дурнее всех яхо и микрософт , может это не гугл

Nostrum, от других изначально все закрыто было как учил Фокси ) - foxi.biz

Inspector, Страницы надо генерить фоном и делать проверку на нагрузку.

Inspector, это не совсем так и ботов всех там нет к примеру мелкомягкого бота и тд , это решение в лоб оно работает я по другому их прибил

Inspector, нагрузку на ноду и сервер посмотри что валит.

Nostrum, отпустило вроде бы )

Inspector, вставит позже если не пофиксишь