Search by WMSN

В общем заценяйте refwm.com моя «товарная поисковая система». Теперь товарные фиды и доры парсят ее (в ней есть yml шаблон поиска). Скорость генерации (кеширования) товарных фидов возросла примерно в 20 раз. LA сервера снизился с 25 до 10-15 (ожидание тормозного фида слона создавало лишнюю нагрузку и расход ресурсов). Ну и теперь товары на дорах не только слона, но еще и озона напрямую и гудбоди. Скоро еще все остальные возможные партнерки добавлю.

Answers:

супер! у тебя талант)

Продавать будешь, или сделаешь сервисом? Или, «как фантазия» - поделишься с народом?

уПопаБылаСобака, бурные у тебя фантазии, весна так действует? )))

уПопаБылаСобака, возможно сделаю сервисом. Массово продавать точно не буду, это не кнопка бабло, которую залил и забыл, надо много телодвижений для поддержки и обновления скрипта.

у тебя если находит 1-й товар с одного сервиса (например, с озона), то показывает все товары только с этой ПП?

Роман Питерский, у меня показывает все, если один и тот же товар в слоне и озоне - то покажет оба. При этом Озон напрямую имеет некоторое преимущество в «ранжировании».

Четко!

Круто! Единственное- там ещё не все товары? К примеру на фразы «видеопроектор kindermann kx» «водонагреватель накопительный гарантерм gtr 50v» не выдал ничего хорошего.

Ded, по второму запросу норм выдача. Товары там все с озона и слона что были в xml выгрузках.

Mik Foxi, Не, если сравнивать со слоном- не айс. Смотрю простые запросы норм, но если начинаю копировать ключи из подсказок, уже хуже

тест пройден refwm.com

Ded, еще есть куда улучшать. я хз как оно работало бы в реальной нагрузке и на больших объемах. Сейчас к сервису долбятся доры со скоростью 10-15 запросов в секунду. Но смотрю нагрузка минимальна и скорость поиска норм. Так что в следующий ап базы будет более толковая релеватность.

interweb, да видимо не все понимают, что такое апи слона когда оно лежит по пол суток... насчет релевантности как я понимаю это бета версия...

Nostrum, если апи слона не отвечает 5 секунд долбимся в сервис. ибо нефиг нагрузку создавать на свой сервер )

Антон Клонов, ну ты подолбись в сервис слона, потом расскажешь как быстро ответили и куда тебя послали.

Антон Клонов, в слона с одного ip можно получить 1-2 запроса, это вообще неочем, в итоге последние месяца полтора хрен что наполнялось и хрен что индексилось. И нагрузка от доров упала в 2-3 раза, после переключения на свой фид, потому что это работает быстрее, быстрее высвобождаются ресурсы т.к. меньше ожидания и меньше холостых запросов.

На дорах и «поисковике» с сервера выкачивается в час по 1.5-2 гб данных, в среднем идет 25 req/s, хотя не редки пики до 45 req/s.

Mik Foxi, фигасе. А тебя че трафик не безграничный ? Все равно же ограничение на дедике есть в 30 Тбайт , не ?

Антон Клонов, ты террабайты с гигабайтами не путай. С моей интенсивностью это всего 1-1,5 тб в месяц.

Запрос NOKIA и SAMSUNG первым делом дывают одинаковый товар одни и те же аккумуляторы.. а что должно быть ?

jkeks, должен быть более конкретный запрос.

Можно добавить поддержку транслита, короче чтобы запросы типа «самсунг» обрабатывались как samsung

tomatok, для этого я думал взять базу синонимов типа. чтоб в поисковое поле добавлять и такие вот транслиты-синонимы.