MnemoLattice — Hogwild! neuro_bipolar
Kompaktní byte-level jazykový dekodér trénovaný 4-agentním Hogwild! shared-weight tréninkem.
Trénink
- Chip: neuro_bipolar (neuromorphic bipolar simulation)
- Agenti: 4 × Hogwild! parallel (fork)
- Kroky: 8000 celkem (2000/agent)
- Vocab: 512 | Context: 128 | Dim: 192 | Hidden: 256
- Mem depth: 800 | Active: 64
- EMA loss: 0.5089 | Perplexity: ~1.66
- Čas: 1224s (~20 min) na CPU
Architektura
MnemoLattice () je kompaktní byte-level dekodér jazyka z projektu Phantom AI.
Hogwild! trénink využívá sdílenou paměť bez synchronizačních zámků (racy writes).