Views
No views yet
kang_Deva support.facebook/nllb-200-distilled-600Mhin_Deva (Hindi)kang_Deva (Kangri in Devanagari script)kang_DevaHindi → Kangri only (unidirectional)1import torch
2from transformers import AutoTokenizer, AutoModelForSeq2SeqLM, pipeline
3
4model_name = "cloghost/nllb-200-distilled-600M-hin-kang-v2"
5model = AutoModelForSeq2SeqLM.from_pretrained(model_name)
6tokenizer = AutoTokenizer.from_pretrained(model_name)
7
8device = 0 if torch.cuda.is_available() else -1
9translator = pipeline(
10 "translation",
11 model=model,
12 tokenizer=tokenizer,
13 src_lang="hin_Deva",
14 tgt_lang="kang_Deva",
15 device=device
16)
17
18text = """मगर हिमाचली भाषा तो पहले से बोली जा रही है।
19लोग सदियों से ही इसके संग जी रहे हैं।
20पहाड़ी भाषा का इतिहास हिन्दी साहित्य के आदिकाल ,जिसे सिद्ध चारण काल के नाम से भी जानते हैं
21"""
22
23translation = translator(text)
24
25| Metric | Value |
|---|---|
| BLEU | 26.03 |
| BLEU-4 | 14.11 |
| ROUGE-1 | 4.73% |
| ROUGE-L | 4.76% |
| METEOR | 43.63% |
| BERTScore-F1 | 93.39% |
| BERT Precision | 93.42% |
| BERT Recall | 93.37% |
| ChrF | 53.93 |
| TER (↓ is better) | 56.96 |
| Empty Predictions | 0 |