Мини-гайд: эмбеддинги для поиска по русским текстам, что реально работает
Пробовал разные эмбеддеры на русском корпусе. Дефолтные англоцентричные модели проседали на морфологии.
Мультиязычные модели нового поколения дали заметно лучший retrieval на русском, особенно на коротких запросах.
Совет: всегда меряйте на СВОИХ данных мини-набором из 30 запросов. Лидерборды врут на вашей специфике.
Комментарии