WebMaster's Social Network

Сообщество русскоязычных вебмастеров и дорвейщиков в формате блогов - дорвеи, доргены, партнерские программы, заработок в интернете.


Фарадей

Как то можно немного угомонить ботов гугла? Ложат сервак. Тариф уже повысил. Все равно ложит. Что...

Как то можно немного угомонить ботов гугла? Ложат сервак. Тариф уже повысил. Все равно ложит. Что вы делаете в этом случае?

Ответы:
Mik Foxi Mik Foxi #124481 2018-06-13 15:02
Фарадей, продавай их другим ) сколько у тебя ботов?

Фарадей Фарадей #124482 2018-06-13 15:11
124481 Mik Foxi, а хз ). Проц и оперативу грузят знатно, хостеру это очень не нравится. Хз что делать, отрубать, как то тоже не хочется))

doorwaymoney doorwaymoney #124484 2018-06-13 15:25
Фарадей, robots.txt... сделай delay 2-3 сек )))) но оно тебе нужно?

Gabriel Gabriel #124490 2018-06-13 15:35
Фарадей, все хуйня, переводи на php-fpm а вместо дисков ssd - проверено, полет нормальный даже с хреновейшей тучей доров на средних впсках ничего не падает, хоть бывает и подгружает временами.

jkeks jkeks #124491 2018-06-13 15:36
124484 doorwaymoney, у гугла не было вроде crawldelay, а яндекс отрубил опцию недавно. В Вебмастере все настраивается 100% и там и ссям

jkeks jkeks #124492 2018-06-13 15:37
Фарадей, превращать все в статику на будущее.

sidorka sidorka #124495 2018-06-13 15:54
Фарадей, радуйся свалившемуся счастью и оптимизируй серваки.