Qwen2.5-7B Police Surveillance LoRA

Загварын тухай

• Base model: Qwen/Qwen2.5-7B-Instruct
• Арга: LoRA (Low-Rank Adaptation) + 4-bit QLoRA
• Сургалтын датасет: 9,040 Q&A хос (Qwen3-VL-30B teacher загвараар үүсгэсэн)
• Epoch: 10
• Eval loss: 0.0195
• Сургалтын хугацаа: ~4.5 цаг (NVIDIA A100 80GB)

Teacher-Student Knowledge Distillation

Qwen3-VL-30B (Teacher)
        ↓
2,260 хяналтын камерын тайлан
        ↓
~9,040 Q&A датасет
        ↓
Qwen2.5-7B LoRA Fine-tuning (Student)

Ашиглах

Сургалтын тохиргоо

Зохиогч