You can deploy this model and start earning money today!

space1637/
iapyx-exaone-3.5-32b-qlora

Name: iapyx-exaone-3.5-32b-qlora
Availability: InStock

Views

No views yet

Iapyx SFT — EXAONE-3.5-32B-Instruct (QLoRA)

Iapyx(AI 라이프 가디언) 리스크 리포트 + Function Call 태스크로 파인튜닝한 국내 오픈웨이트 모델. 학습·평가는 A100 80GB ×2에서 수행했으며, 채점은 결정적 코드(모델 무관)로 이뤄졌다.

방식: QLoRA · base LGAI-EXAONE/EXAONE-3.5-32B-Instruct
데이터: 합성 SFT 통합 1,881 (리스크 945 + FC 936), val 리스크 105 / FC 104
3 epochs · cosine · warmup 3% · max_len 1024 · assistant-only loss
풀FT: FSDP full_shard + 8-bit Adam(lr 1e-5) / QLoRA: NF4 4bit + LoRA r=16(lr 2e-4)
flash-attention-2 · bf16 · gradient checkpointing

학습 로그: Weights & Biases iapyx-finetune.