Glosario de IA Operations
¿Qué es Inferencia?
← Todos los términos del glosarioFase en la que un modelo entrenado produce predicciones o generación.
Explicación
La inferencia es cuando un modelo entrenado se usa para producir outputs. Ocurre en producción; optimizar latencia y coste es clave para escalabilidad.
Guías de decisión que usan este término
- LLM open source vs propietarios: ¿cómo debe elegir una empresa?
- IA soberana u on-prem vs APIs de IA en la nube: ¿dónde deben correr tus modelos?
- Modelos de razonamiento o LLM estándar: ¿cuándo compensa pagar por pensar más?
- IA por licencia o por consumo: ¿qué modelo de precio encaja con el uso real que hará tu organización?
- Modelos de lenguaje pequeños o grandes: ¿cuál debe resolver tu caso de uso?