WebMaster's Social Network

Сообщество русскоязычных вебмастеров и дорвейщиков в формате блогов - дорвеи, доргены, партнерские программы, заработок в интернете.


Shtrix1

Парни, как вы оптимизируете ВПСки? Всего по 50-60 доров на каждой, но как приходит яндекс, то вал...

Парни, как вы оптимизируете ВПСки? Всего по 50-60 доров на каждой, но как приходит яндекс, то валит нещадно https://imgwm.com/upload/05a/f41/a97ccf2ecafb89c9d04a5b94c6.png https://imgwm.com/upload/d7b/adf/bc0d3f3510be23e50ea57db874.png

Ответы:
Mik Foxi Mik Foxi #65859 2016-10-19 22:49
Тебе нужны услуги сисадмина ) keep alive и т.п. таймауты уменьши, чтоб сессии и т.п. быстрее дропались и процессы освобождались. В остальном нужен профессиональный взгляд.

webmasterк webmasterк #65860 2016-10-19 22:53
Судя по скрину у тебя апач странно работает, и от юзера www-data и от юзера admin, и посмотри утилиту atop, нужно узнать где узкое место (если оно есть :D)

Shtrix1 Shtrix1 #65861 2016-10-19 23:06
Mik Foxi, да я только за! Спали скрин нагрузки своего серва с 5к сайтами на борту, когда хотя бы одновременно 50% из них усердно долбит янд. https://imgwm.com/upload/9ec/849/9e2f2fb3849aff0a237ca1197a.png

Mik Foxi Mik Foxi #65862 2016-10-19 23:22
Shtrix1, у меня лайти, я апача не юзал года 3 уже.

webmasterк webmasterк #65863 2016-10-19 23:28
Mik Foxi, да нам пох, спали скрин htop :D

webmasterк webmasterк #65865 2016-10-19 23:31
Shtrix1, кстати старое доброе решение проблемы тупых ботов, еще со времен yahoo: $load = sys_getloadavg(); if ($load 10) set_error(’503’);

Mik Foxi Mik Foxi #65866 2016-10-19 23:33
webmasterк, у меня тот сервер давно остановлен. И еще я там активно следил за ботами и активных ненужных банил.

Shtrix1 Shtrix1 #65867 2016-10-19 23:34
webmasterк, ну)) гляди, под впечатлением народ столько заявок на оптимизацию серваков до утра накидает, что и выход обновы доргена можно будет отложить))

Shtrix1 Shtrix1 #65868 2016-10-19 23:38
Эх Foxi, тебе бы еще шустрого пиарщика и вообще б всё было замечтательно просто!

Mik Foxi Mik Foxi #65869 2016-10-19 23:41
Shtrix1, ты наверное редко меня читаешь ) я писал когда и почему я все нах грохнул. Если пропустил - профита было ноль, все ушло в бан, я ушел в глубочайший минус и дипрессию. Сейчас потиху из всего этого выхожу с новыми дорами, которых в сотню раз меньше.

Shtrix1 Shtrix1 #65870 2016-10-19 23:42
webmasterк, дак в том то и дело, что этот как раз и не такой уж тупой, но настырный зараза)) можно вообще отрубить всех ботов и наслаждаться.. тишиной , сначала изредка, но потом все чаще нарушаемой бурчанием желудка))

Mik Foxi Mik Foxi #65871 2016-10-19 23:44
Crawl-delay + загуглить «оптимизация apache под высокие нагрузки», и вот тебе x10 раз экономия ресурсов. Пошел я спать )

webmasterк webmasterк #65872 2016-10-19 23:45
Shtrix1, Если бот не определяет, что ты ему отдаёшь страничку полминуты и не уменьшает интенсивность запросов, то он – ТУПОЙ :D

tiobitra tiobitra #65876 2016-10-20 00:37
правило для nginx.conf limit_req_zone binary_remote_addr zone=limit_req:64m rate=2r/s; ограничивает доступ с одного ip до двух запросов в секунду все таймауты можно уменьшить до 10-15 секунд можешь поставить такую https://easyengine.io/ или такую https://serverpilot.io/ панельки

Mik Foxi Mik Foxi #65881 2016-10-20 10:07
tiobitra, хреновый подход. надо полностью банить говноботов и не ограничивать яндекса и гугла, их обижать никак нельзя, а то они в ответ обидятся и будут медленно индексить.