# Use a pipeline as a high-level helper
from transformers import pipeline
pipe = pipeline("text-generation",
                model="umarigan/TURKCELL-LLM-7B-openhermes",
                #use_flash_attention_2=True
                )
# Generate text
q = "Weng bebek bakıcılığından saatte 12 dolar kazanıyor. Dün sadece 50 dakika bebek bakıcılığı yaptı. Ne kadar kazandı?"
sequences_rlhf = pipe(
    q,
    do_sample=True,
    temperature=0.7,
    top_p=0.9,
    num_return_sequences=1,
    max_length=2048,
)
sequences_rlhf[0]['generated_text']