Views
No views yet

| Model | params | Fluency | Coherence | Accuracy | Completeness |
|---|---|---|---|---|---|
| kikikara/llama_with_eeve_new_03_150m(this) | 0.15B | 63.12% | 37.18% | 23.75% | 23.75% |
| EleutherAI/polyglot-ko-1.3b | 1.3B | 51.25% | 40.31% | 34.68% | 32.5% |
| EleutherAI/polyglot-ko-5.8b | 5.8B | 54.37% | 40.62% | 41.25% | 35% |
1from transformers import AutoTokenizer, AutoModelForCausalLM, pipeline
2
3tokenizer = AutoTokenizer.from_pretrained("kikikara/llama_with_eeve_new_03_150m")
4model = AutoModelForCausalLM.from_pretrained("kikikara/llama_with_eeve_new_03_150m")
5
6question = "너는 누구야?"
7
8prompt = f"### System:\n당신은 비도덕적이거나, 성적이거나, 불법적이거나 또는 사회 통념적으로 허용되지 않는 발언은 하지 않습니다.\n사용자와 즐겁게 대화하며, 사용자의 응답에 가능한 정확하고 친절하게 응답함으로써 최대한 도와주려고 노력합니다.\n\n\n### User:\n {question}"
9pipe = pipeline(task="text-generation", model=model, tokenizer=tokenizer, max_length=400, repetition_penalty=1.12)
10result = pipe(prompt)
11
12print(result[0]['generated_text'])```
13
14