Mik Foxi Mik Foxi 2016-03-25 19:30
В общем заценяйте http://refwm.com/ моя «товарная поисковая система». Теперь товарные фиды и доры парсят ее (в ней есть yml шаблон поиска). Скорость генерации (кеширования) товарных фидов возросла примерно в 20 раз. LA сервера снизился с 25 до 10-15 (ожидание тормозного фида слона создавало лишнюю нагрузку и расход ресурсов). Ну и теперь товары на дорах не только слона, но еще и озона напрямую и гудбоди. Скоро еще все остальные возможные партнерки добавлю.

Ответы:
Nostrum Nostrum #51887 2016-03-25 19:35
супер! у тебя талант)

Брати Гадюкіни Брати Гадюкіни #51888 2016-03-25 19:38
Продавать будешь, или сделаешь сервисом? Или, «как фантазия» - поделишься с народом?

Nostrum Nostrum #51889 2016-03-25 19:48
уПопаБылаСобака, бурные у тебя фантазии, весна так действует? )))

Mik Foxi Mik Foxi #51890 2016-03-25 19:49
уПопаБылаСобака, возможно сделаю сервисом. Массово продавать точно не буду, это не кнопка бабло, которую залил и забыл, надо много телодвижений для поддержки и обновления скрипта.

Роман Питерский Роман Питерский #51891 2016-03-25 19:49
у тебя если находит 1-й товар с одного сервиса (например, с озона), то показывает все товары только с этой ПП?

Mik Foxi Mik Foxi #51892 2016-03-25 19:50
Роман Питерский, у меня показывает все, если один и тот же товар в слоне и озоне - то покажет оба. При этом Озон напрямую имеет некоторое преимущество в «ранжировании».

one one #51893 2016-03-25 20:01
Четко!

Ded Ded #51894 2016-03-25 20:02
Круто! Единственное- там ещё не все товары? К примеру на фразы «видеопроектор kindermann kx» «водонагреватель накопительный гарантерм gtr 50v» не выдал ничего хорошего.

Mik Foxi Mik Foxi #51895 2016-03-25 20:03
Ded, по второму запросу норм выдача. Товары там все с озона и слона что были в xml выгрузках.

Ded Ded #51897 2016-03-25 20:25
Mik Foxi, Не, если сравнивать со слоном- не айс. Смотрю простые запросы норм, но если начинаю копировать ключи из подсказок, уже хуже


Mik Foxi Mik Foxi #51899 2016-03-25 20:31
Ded, еще есть куда улучшать. я хз как оно работало бы в реальной нагрузке и на больших объемах. Сейчас к сервису долбятся доры со скоростью 10-15 запросов в секунду. Но смотрю нагрузка минимальна и скорость поиска норм. Так что в следующий ап базы будет более толковая релеватность.

Nostrum Nostrum #51900 2016-03-25 20:37
interweb, да видимо не все понимают, что такое апи слона когда оно лежит по пол суток... насчет релевантности как я понимаю это бета версия...

Антон Клонов Антон Клонов #51903 2016-03-25 21:47
Nostrum, если апи слона не отвечает 5 секунд долбимся в сервис. ибо нефиг нагрузку создавать на свой сервер )

Nostrum Nostrum #51904 2016-03-25 22:01
Антон Клонов, ну ты подолбись в сервис слона, потом расскажешь как быстро ответили и куда тебя послали.

Mik Foxi Mik Foxi #51905 2016-03-25 22:18
Антон Клонов, в слона с одного ip можно получить 1-2 запроса, это вообще неочем, в итоге последние месяца полтора хрен что наполнялось и хрен что индексилось. И нагрузка от доров упала в 2-3 раза, после переключения на свой фид, потому что это работает быстрее, быстрее высвобождаются ресурсы т.к. меньше ожидания и меньше холостых запросов.

Mik Foxi Mik Foxi #51906 2016-03-25 23:13
На дорах и «поисковике» с сервера выкачивается в час по 1.5-2 гб данных, в среднем идет 25 req/s, хотя не редки пики до 45 req/s.

Антон Клонов Антон Клонов #51908 2016-03-26 07:02
Mik Foxi, фигасе. А тебя че трафик не безграничный ? Все равно же ограничение на дедике есть в 30 Тбайт , не ?

Mik Foxi Mik Foxi #51909 2016-03-26 08:33
Антон Клонов, ты террабайты с гигабайтами не путай. С моей интенсивностью это всего 1-1,5 тб в месяц.

jkeks jkeks #51913 2016-03-26 09:42
Запрос NOKIA и SAMSUNG первым делом дывают одинаковый товар одни и те же аккумуляторы.. а что должно быть ?

Mik Foxi Mik Foxi #51914 2016-03-26 10:02
jkeks, должен быть более конкретный запрос.

tomatok tomatok #51920 2016-03-26 13:28
Можно добавить поддержку транслита, короче чтобы запросы типа «самсунг» обрабатывались как samsung

Mik Foxi Mik Foxi #51921 2016-03-26 13:29
tomatok, для этого я думал взять базу синонимов типа. чтоб в поисковое поле добавлять и такие вот транслиты-синонимы.