pip install transformers datasets torch
[
{"soru": "Diyabet nedir?", "cevap": "Diyabet, vücudunuzun yeterince insülin üretemediği veya insülini etkili bir şekilde kullanamadığı bir durumdur."},
{"soru": "İnsülin direnci nedir?", "cevap": "İnsülin direnci, hücrelerinizin insüline yanıt vermediği ve kan şekerinin yükselmesine neden olduğu bir durumdur."},
{"soru": "Diyabet nasıl yönetilir?", "cevap": "Diyabet, sağlıklı beslenme, düzenli egzersiz ve ilaçlarla yönetilebilir."}
]
from transformers import AutoTokenizer, AutoModelForCausalLM, Trainer, TrainingArguments
from datasets import Dataset
import json
Veri setini yükle
with open("diabi_veri_seti.json", "r", encoding="utf-8") as f:
veri_seti = json.load(f)
#Veri setini Hugging Face Dataset formatına dönüştür
sorular = [veri["soru"] for veri in veri_seti]
cevaplar = [veri["cevap"] for veri in veri_seti]
Tokenizer ve modeli yükle
model_adi = "microsoft/DialoGPT-small" # Küçük, Orta veya Büyük model seçebilirsiniz
tokenizer = AutoTokenizer.from_pretrained(model_adi)
model = AutoModelForCausalLM.from_pretrained(model_adi)
Veri setini tokenize et
def tokenize_veri(ornek):
return tokenizer(ornek["soru"] + " " + ornek["cevap"], truncation=True, padding="max_length", max_length=128)
Modeli kaydet
trainer.save_model("./diabi-model")
tokenizer.save_pretrained("./diabi-model")
from transformers import AutoTokenizer, AutoModelForCausalLM
Eğitilen modeli yükle
model_adi = "./diabi-model"
tokenizer = AutoTokenizer.from_pretrained(model_adi)
model = AutoModelForCausalLM.from_pretrained(model_adi)
Sohbet başlat
print("Diabi: Merhaba! Ben Diabi, diyabetle ilgili sorularınızı yanıtlamak için buradayım. Nasıl yardımcı olabilirim? (Çıkmak için 'exit' yazın)")
while True:
user_input = input("Siz: ")
if user_input.lower() == "exit":
break