Definición
LoRA (Low-Rank Adaptation) es un método eficiente de ajuste fino (fine-tuning) que congela los pesos originales de un modelo preentrenado y, en su lugar, entrena solo un pequeño número de parámetros adicionales, matemáticamente comprimidos.Explicación
El uso de LoRA reduce drásticamente la necesidad de espacio de almacenamiento y potencia computacional para el ajuste fino de modelos de lenguaje. Esto se debe a que, en lugar de miles de millones, solo es necesario adaptar unos pocos millones de parámetros. Esta capacidad permite incluso a las empresas B2B y SaaS más pequeñas entrenar modelos grandes en sus propios servidores o en instancias de nube de bajo costo para tareas altamente específicas.Además, los módulos LoRA pueden intercambiarse dinámicamente. Así, un mismo modelo base puede cargarse con diferentes pesos LoRA pequeños para, alternativamente, generar correos electrónicos, analizar conversaciones con clientes o revisar contratos. De este modo, las soluciones de IA personalizadas pueden integrarse en los sistemas de ventas y CRM existentes de forma extremadamente flexible, rentable y escalable.