LiteLLM en Colombia: tu gateway de modelos de IA, en tu servidor
Un gateway de código abierto que pone más de 100 proveedores de modelos detrás de una sola API, con el formato de OpenAI. Claves virtuales, presupuestos y control del gasto, en tu servidor cloud en Colombia. Lo instalas tú con Docker, o te lo instalamos gratis.
Precio regular: $59.900/mes−30% primer período
Al contratar 1 mes · clientes nuevos
Qué es LiteLLM y qué hace
LiteLLM es un gateway de IA de código abierto, hecho por BerriAI. Le hablas con el formato de OpenAI y él llama al proveedor que elijas: OpenAI, Anthropic, Gemini, Mistral, modelos propios con Ollama o vLLM, y así hasta más de cien.
Viene en dos formas: una librería de Python para tu código, o un servidor —el proxy— que pones en el centro para todo tu equipo. Esta página es la del servidor: un solo punto de entrada, con sus claves, sus límites y su panel.
Cambiar de proveedor deja de ser reescribir código. Tus aplicaciones siguen hablando la misma API, y el cambio lo haces en el gateway.
Qué puedes hacer con LiteLLM
Para qué se pone un gateway delante de los modelos.
Cómo desplegar LiteLLM en Conexcol
LiteLLM corre como un servicio en Linux, con su base de datos, no como una aplicación PHP: no cabe en el hosting con cPanel. Va en un servidor cloud, y lo instalas tú con Docker o te lo instalamos gratis.
La instalas tú con root, o te la instalamos gratis
Un servidor cloud a tu nombre, con root. La aplicación la instalas tú siguiendo los pasos de abajo, o la instalamos nosotros, gratis: pídela por ticket cuando contrates el servidor.
Cuándo elegir esta vía. Cuando la aplicación no es un sitio web ni llega preinstalada, o quieres una versión o una configuración concretas.
Dificultad: Administración de sistemas, o ninguna si la instalamos nosotros · Tiempo: Lo que tarde la aplicación
La master key es la llave del gateway: trátala como la contraseña de root, no la subas a un repositorio y cámbiala si se filtra. Y guarda el .env: si regeneras la salt key, las claves de proveedor guardadas dejan de poder leerse.
Si la instalamos nosotros, te entregamos el acceso y queda a tu nombre. Desde ahí, el soporte de Conexcol cubre el servidor —que encienda, que tenga red, que responda—; la aplicación y sus datos son tuyos.
Precio regular: $59.900/mes−30% primer período
Al contratar 1 mes · clientes nuevos
Lo que más se usa de LiteLLM
Lo que trae la parte libre, según su propia documentación.
Quién usa LiteLLM
Quien usa varios modelos y quiere orden en las claves y en la cuenta.
LiteLLM en cifras
El proyecto, en su repositorio.
Dónde seguir a LiteLLM
Enlaces al proyecto, no a nosotros. LiteLLM es software de terceros: quien decide su rumbo es BerriAI.
Preguntas frecuentes sobre LiteLLM
Si buscas algo parecido
Sus vecinos: Langfuse, para ver cada llamada que pasa por el gateway, y Ollama, para sumar modelos que corren en tu propio servidor.
- LangfuseObservabilidad y evaluación para tus aplicaciones con IA
- OllamaModelos de IA abiertos, corriendo en tu servidor
- CoolifyDespliegue autoalojado
- LaravelFramework PHP · software libre
- BootstrapFramework CSS · el más usado del mundo
- CodeIgniterFramework PHP ligero
LiteLLM es software de terceros (BerriAI, MIT, salvo la carpeta enterprise, con licencia aparte). Conexcol Cloud Colombia S.A.S. actúa como proveedor de infraestructura: no otorga ni comercializa licencias de ese software, ni lo representa. Los nombres y logotipos pertenecen a sus titulares. Términos y Condiciones.