Modelo de IA ajustado para la Facultad de Ciencias y Tecnología de la Universidad Mayor de San Simón (UMSS), diseñado para la aplicación TecnoTime. Su objetivo es ayudar a estudiantes a mantenerse organizados, motivados y conectados con sus actividades académicas mediante respuestas breves, consistentes y parseables.
Este modelo es un fine-tuning de LiquidAI/LFM2.5-350M con SFT + LoRA usando Unsloth. Está orientado a producir salidas compatibles con la estructura SimonResponse usada por el sistema Android.
Repositorio destino:
Smith-3/simon-fcyt-umss-v2
Propósito Académico
El modelo está orientado a:
Recordatorios de clases y horarios.
Mensajes motivacionales para mejorar continuidad académica.
Check-ins cortos para acompañamiento del progreso diario.
Estímulo positivo en momentos clave del semestre.
Está pensado para reforzar hábitos de constancia, asistencia, estado de ánimo y autocuidado académico.
Formato Estructurado de Respuesta
La salida esperada no es texto libre. El modelo debe generar un único objeto JSON válido, sin Markdown alrededor, con campos compatibles con TecnoTime.
1{2"why":"Para que no pierdas tu ritmo académico",3"opening_tag":"¡Atención, estudiante FCyT!",4"question":"¿Listo para tu clase de hoy?",5"icon_tag":"info",6"choices":[7{"id":"yes","label":"Llego en un momento"},8{"id":"no","label":"Estoy terminando algo"}9]10}
Check-in Motivacional
json
1{2"why":"Para reforzar tu constancia",3"opening_tag":"¡Vamos con toda, ingeniería!",4"question":"¿Cómo te sientes con lo que has avanzado hoy?",5"icon_tag":"focus",6"choices":[7{"id":"yes","label":"Bien, sigo avanzando"},8{"id":"no","label":"Hoy fue complicado"}9]10}
Modelo Base y Entrenamiento
Modelo base: LiquidAI/LFM2.5-350M
Tokenizer usado en el notebook: unsloth/LFM2.5-1.2B-Instruct
Método: SFT + LoRA
Framework: Unsloth + TRL + PEFT
Dataset: data/processed/train_data.jsonl
Formato del dataset: LiquidAI messages
Configuración de entrenamiento v2:
Parámetro
Valor
Épocas
3
Batch por dispositivo
4
Acumulación de gradiente
4
Batch efectivo
16
Learning rate
2e-4
Scheduler
cosine
Warmup ratio
0.03
LoRA rank
16
LoRA alpha
32
LoRA dropout
0.05
Archivos Esperados
Este repositorio está preparado para incluir:
Archivo o variante
Uso recomendado
Adaptadores LoRA
Respaldo reproducible del fine-tuning
Modelo fusionado 16-bit
Versión principal para despliegue o conversión
F16 GGUF
Referencia de mayor tamaño
Q8_0 GGUF
Alta calidad, requiere más RAM
Q6_K GGUF
Buen equilibrio con alta calidad
Q5_K_M GGUF
Mejor equilibrio calidad/rendimiento
Q4_K_M GGUF
Equipos de bajos recursos, laboratorios o laptops modestas
Q3_K_M GGUF
Variante más liviana
Uso con llama.cpp
Ejemplo con una cuantización GGUF:
llama-cli -m simon-fcyt-umss-v2-Q5_K_M.gguf -p "GENERAR: CLASS_REMINDER para clase de Física"