Views
No views yet
Shuu12121/CodeModernBERT-Crow をベースにした Sentence Transformer モデルであり、PHPとGoのクリーン版データセットを新たに加えることで、さらに高精度な多言語コード検索を実現しています。Crow-Plus) に対して若干の性能向上が確認されています。This is an enhanced version ofCodeSearch-ModernBERT-Crow-Plus, based onCodeModernBERT-Crow, incorporating clean PHP and Go datasets for improved multilingual code search performance.
| メトリクス | スコア |
|---|---|
| nDCG@10 | 0.8946 |
| Recall@10 | 0.9597 |
| MAP@10 | 0.8731 |
| MRR@10 | 0.8731 |
ndcg_at_1: 0.8175ndcg_at_3: 0.8810ndcg_at_5: 0.8888recall_at_20: 0.9672recall_at_100: 0.9807recall_at_1000: 1.0前バージョン (Crow-Plus) 比較で nDCG@10 がわずかに向上（+0.17pt）しており、より安定した高リコールが得られています。
| メトリクス | スコア |
|---|---|
| nDCG@10 | 0.8001 |
| Recall@10 | 0.8806 |
| MAP@10 | 0.7742 |
| MRR@10 | 0.7742 |
ndcg_at_1: 0.7168ndcg_at_3: 0.7775ndcg_at_5: 0.7896recall_at_20: 0.9057recall_at_100: 0.9495recall_at_1000: 0.9782こちらも、従来版より全体的に Recall 向上がみられ、特に Top-20、Top-100段階での検索精度に安定性が出ています。
| 項目 | Crow-Plus | Crow-Plus-1.0 |
|---|---|---|
| 学習データ | 従来データセット | PHP・Goのクリーン版追加 |
| COIR nDCG@10 | 0.7988 | 0.8001 (+0.13pt) |
| CodeSearchNet nDCG@10 | 0.8930 | 0.8946 (+0.16pt) |
| Recall@10 | 0.9610 | 0.9597 (ほぼ同等) |
| 特徴 | 標準構成 | データ品質向上による安定化 |
sentence-transformersライブラリを用いて簡単に利用可能です。
（※詳しい使用例はベース版に準じますので省略）1from sentence_transformers import SentenceTransformer
2model = SentenceTransformer("Shuu12121/CodeSearch-ModernBERT-Crow-Plus-1.0")