Saltar al contenido
Neural Soft

Desarrollo con IA

Curso de modelos de IA abiertos y en local

IA generativa en tu propia infraestructura, sin que los datos salgan de la empresa.

No todas las empresas pueden o quieren enviar sus datos a un proveedor externo. Los modelos de IA abiertos permiten ejecutar IA generativa en servidores propios, con control total sobre la información, y su calidad no ha dejado de mejorar.

En este curso aprenderás a elegir el modelo adecuado para cada caso, a dimensionar el hardware, a entender la cuantización y a ejecutar y servir modelos con Ollama, llama.cpp o vLLM. Terminamos comparando con datos su calidad y su coste frente a un modelo comercial, para decidir con criterio.

Qué aprenderás

  • Conocer el ecosistema de modelos abiertos y sus licencias
  • Elegir el modelo y el hardware adecuados para cada caso
  • Ejecutar modelos en local y servirlos a un equipo
  • Comparar su calidad y coste con los modelos comerciales
  • Desplegarlos con seguridad

Temario

7 módulos, de los fundamentos al proyecto final.

  1. Por qué modelos abiertos

    • Privacidad, soberanía de los datos y coste
    • Modelos abiertos frente a APIs comerciales
    • Familias de modelos y licencias de uso
  2. Elegir modelo

    • Tamaño, contexto, idiomas y tareas
    • Clasificaciones y pruebas propias
  3. Hardware

    • CPU, GPU y memoria necesaria
    • Cuantización y su efecto en la calidad
    • Estimar el coste de una instalación
  4. Ejecutar en local

    • Ollama y LM Studio
    • llama.cpp y formatos de modelo
  5. Servir a un equipo

    • vLLM y APIs compatibles
    • Interfaz de chat interna
    • Concurrencia y rendimiento
  6. Aplicaciones

    • RAG con modelos locales
    • Embeddings locales
    • Uso de herramientas
  7. Seguridad y operación

    • Control de acceso y registros
    • Actualizaciones de modelos

Herramientas con las que practicarás

  • Ollama
  • LM Studio
  • llama.cpp
  • vLLM
  • Open WebUI
  • Hugging Face

Proyecto práctico

Despliegas un modelo abierto en un servidor o en tu equipo, lo sirves con una API compatible, lo conectas a una interfaz de chat y comparas su calidad, velocidad y coste con un modelo comercial en tareas de tu empresa.

Requisitos

  • Manejo de la línea de comandos.
  • Nociones de Docker recomendables.

Otros cursos

¿Quieres este curso para tu equipo?

Adaptamos el contenido, la duración y la modalidad a tu empresa.