Это переведенная на русский язык версия mteb/biosses-sts - Biomedical Semantic Similarity Estimation.
Метрики некоторых моделей ( через косинусное сходство):
Модель (cls-pooling)
Pearson
Spearman
MAE
RMSE
jinaai/jina-embeddings-v3
0.8222
0.7768
2.2463
2.4468
cointegrated/rubert-tiny2
0.6897
0.6793
2.1546
2.3944
DeepPavlov/rubert-base-cased
0.2982
0.4966
2.7042
2.9374
ai-forever/ruRoberta-large
-0.0096
0.0219
2.3931
2.6905
Модель (mean-pooling)
Pearson
Spearman
MAE… See the full description on the dataset page:
https://huggingface.co/datasets/Kostya165/ru_biosses_sts.
