Сравнительный анализ и оценка согласованности методов интеграции семантических представлений текстов

Аннотации

Аннотация

Исследуются методы агрегации результатов трех эмбеддинговых моделей для оценки семантической близости текстов: усреднение косинусных близостей, конкатенация векторов, а также выбор одной из трех косинусных близостей на основе методов анализа главных компонент и сингулярного разложения. Статистический анализ показал, что усреднение косинусных близостей в качестве метода агрегации показывает наилучшие результаты. Полученные данные могут быть использованы для повышения устойчивости моделей оценки семантической близости текстов с помощью ансамблей эмбеддингов.