Views
No views yet
DictaLM 3.0 here.1
2from transformers import pipeline
3
4generator = pipeline('text-generation', model="dicta-il/DictaLM-3.0-1.7B-Thinking")
5
6messages = [
7 {"role": "user", "content": "איזה רוטב אהוב עליך?"},
8 {"role": "assistant", "content": "טוב, אני די מחבב כמה טיפות מיץ לימון סחוט טרי. זה מוסיף בדיוק את הכמות הנכונה של טעם חמצמץ לכל מה שאני מבשל במטבח!"},
9 {"role": "user", "content": "האם יש לך מתכונים למיונז?"}
10]
11
12print(generator(messages)[0]['generated_text'][-1]) # just print the last message
13# 'role': 'assistant', 'content': 'המשתמש שואל: "האם יש לך מתכונים למיונז?" אנחנו צריכים לספק מתכונים למיונז. לספק מתכונים ברורים, אולי עם שלבים. לספק כמה גרסאות. צריך להיות ידידותי.</think>בהחלט! הנה כמה מתכונים קלים, טעימים למיונז שתוכל לנסות. בחר את זה שמתאים לאפיון המטבח שלך, והרגיש חופשי להתאים את העוצמה של החריפות או התיבול לפי הטעם שלך.\n\n---\n\n## 1. מיונז בסיסי (מתכון בסיסי)\n\n**מרכיבים**\n- 2 כוסות חלב (או כל חלב מתוק אחר)\n- 1 ביצה גדולה\n- 1 כפית מיץ לימון טרי\n- 1 כפית מיץ תפוזים טרי (אופציונלי)\n- 1⁄2 כפית חרדל דיז\'ון\n- 1⁄2 כפית מלח\n- 1⁄4 כפית פלפל שחור טחון טרי\n\n**הוראות**\n1. **הכנת הביצה** – בקערה, טורפים יחד ביצה'}vllm serve dicta-il/DictaLM-3.0-1.7B-Thinking --enable-auto-tool-choice --tool-call-parser hermes --reasoning_parser deepseek_r11from openai import OpenAI
2
3client = OpenAI(
4 base_url="http://localhost:8000/v1",
5 api_key="sk-no-key-required"
6)
7
8response = client.chat.completions.create(
9 model="dicta-il/DictaLM-3.0-1.7B-Thinking",
10 messages=[
11 {"role": "user", "content": "Hello, how are you?"}
12 ],
13)
14
15print(response.choices[0].message.content)The reasoning traces should be available in the response structure in the designated fild.
1@article{Shmidman2025DictaLM3,
2 title={{Dicta-LM 3.0: Advancing The Frontier of Hebrew Sovereign LLMs}},
3 author={Shaltiel Shmidman and Avi Shmidman and Amir DN Cohen and Moshe Koppel},
4 year={2025},
5 publisher={{DICTA / Jerusalem, Israel}},
6 note={https://www.dicta.org.il/publications/DictaLM_3_0___Techincal_Report.pdf}
7}