Views
No views yet
"Don't just train a model. Raise an organism."
adaptive fazda uzman loblar (Expert Lobes) üretmeye hazır altyapı.| Özellik | Değer |
|---|---|
| Parametre Sayısı | 54,235,136 |
| Gizli Boyut (d_model) | 512 |
| Katman Sayısı | 12 |
| Dikkat Başlıkları (Heads) | 8 |
| Sözlük Boyutu (Vocab) | 32,000 |
| Eğitim Cihazı | NVIDIA L4 |
dno kütüphanesini yüklemeniz ve model dosyasını (.dno) projenize dahil etmeniz gerekir.1pip install dno
2
32. Organizmayı Canlandırma
4Python
5
6import torch
7from dno import DynamicNetwork
8from tokenizers import Tokenizer
9
10# Konfigürasyon
11model_path = "DNO_Core_Genesis_v1_Final.dno"
12tokenizer_path = "tokenizer.json"
13
14# Organizmayı Yükle
15# Not: GPTModel ve reconstruction_factory tanımlarınızın ortamda bulunması gerekir.
16network = DynamicNetwork.load_dno(model_path, module_factory=reconstruction_factory)
17network.eval().to("cuda")
18
19tokenizer = Tokenizer.from_file(tokenizer_path)
20
21# İnference (Üretim)
22prompt = "Teknolojinin gelişimi insan özgürlüğünü"
23input_ids = torch.tensor(tokenizer.encode(prompt).ids).unsqueeze(0).to("cuda")
24
25with torch.no_grad():
26 for _ in range(100):
27 output = network(input_ids)
28 next_token = torch.multinomial(torch.softmax(output[:, -1, :] / 0.7, dim=-1), 1)
29 print(tokenizer.decode([next_token.item()]), end="", flush=True)
30 input_ids = torch.cat([input_ids, next_token], dim=1)
31
32🧬 Evrimsel Yol Haritası
33
34Bu model şu an "Seed Cortex" aşamasındadır. Organizmanın gelişimini şu şekilde sürdürebilirsiniz:
35
36 Infancy (Mevcut): Genel dil ve mantık becerilerinin kazanıldığı evre.
37
38 Adaptive Phase: network.config.training_phase = 'adaptive' komutuyla büyümeyi aktif edin.
39
40 Mitosis: growth_engine.mitosis() kullanarak modele özel uzmanlıklar (Kodlama, Tıp, Jeoloji) ekleyin.
41
42 Synaptic Pruning: Gereksizleşen uzmanlıkları budayarak organizmayı optimize edin.
43
44🤝 Katkıda Bulunma
45
46Bu organizmanın evrimine katkıda bulunmak, yeni uzmanlık lobları eğitmek veya dno mimarisini geliştirmek için GitHub repomuzu ziyaret edebilirsiniz.
47📜 Lisans
48
49Bu model MIT lisansı altında korunmaktadır.