Contacta con nosotros

Temario del curso

Infraestructura como código para EXO

  • Visión general de patrones de despliegue de EXO: clústeres de un solo nodo, multi-nodo y con RDMA
  • Automatización de la instalación de dependencias (Xcode, uv, Node.js, Rust) mediante gestión de configuraciones
  • Uso de Nix flakes para construcciones reproducibles de EXO y entornos de desarrollo
  • Escritura de playbooks de Ansible o scripts shell para el aprovisionamiento no supervisado de clústeres

Construcciones reproducibles e integración con CI

  • Fijar dependencias y construir el tablero en pipelines de CI
  • Ejecutar pruebas iniciales (smoke tests) de EXO en ejecutores de GitHub Actions o GitLab CI
  • Crear imágenes base y flujos de reversión basados en instantáneas para VMs de macOS y Linux
  • Versionar tarjetas de modelos personalizados junto al código de la aplicación

Descubrimiento de clústeres y automatización de redes

  • Configuración de mDNS y DNS estático para un descubrimiento fiable de nodos libp2p
  • Automatización de la creación de perfiles de red y gestión de puentes Thunderbolt en macOS
  • Uso de espacios de nombres personalizados (EXO_LIBP2P_NAMESPACE) para separar clústeres de desarrollo, staging y producción
  • Reglas de firewall y segmentación de red para entornos multiinquilino

Gestión del ciclo de vida de almacenamiento y modelos

  • Diseño de estrategias para EXO_MODELS_DIRS y EXO_MODELS_READ_ONLY_DIRS
  • Montaje de comparticiones NFS o SAN como repositorios de modelos solo lectura para un aprovisionamiento rápido
  • Colección de basura de cachés obsoletas y políticas de retención de pesos versionados
  • Automatización de descargas previas de modelos y comprobaciones de salud antes de actualizaciones progresivas

Monitoreo y alertas

  • Envío de logs de EXO a registro centralizado (ELK, Loki o Splunk)
  • Construcción de tableros Grafana a partir de la salida de EXO_TRACING_ENABLED
  • Configuración de alertas ante cambios en la membresía del clúster, eventos OOM y picos de latencia de inferencia
  • Correlacionar telemetría de hardware macmon con regresiones de rendimiento del modelo

Actualización, reversión y recuperación ante desastres

  • Preparación de actualizaciones de binarios EXO en un nodo canario antes del despliegue masivo en el flota
  • Reversión a nivel de modelo: cambio entre versiones cuantizadas sin necesidad de volver a descargar
  • Respaldo y restauración del estado del clúster, espacios de nombres personalizados y pesos en caché
  • Documentación de runbooks de recuperación para escenarios de reconstrucción total del clúster

Acondicionamiento de seguridad y cumplimiento

  • Aplicación de TLS en la capa de proxy inverso (nginx, traefik) para el tablero y la API
  • Implementación de limitación de tasa de API y lista blanca de IPs para puntos finales de EXO
  • Aislamiento de clústeres con VLANs y políticas de red de confianza cero
  • Auditoría de accesos y mantenimiento de un inventario de modelos y versiones desplegados

Requerimientos

  • Experiencia con prácticas DevOps (CI/CD, IaC, orquestación de contenedores)
  • Familiaridad con administración de sistemas y gestión de paquetes en macOS o Linux
  • Comprensión de conceptos de redes, DNS y almacenamiento

Audiencia

  • Ingenieros DevOps
  • Arquitectos de infraestructura
  • SREs responsables de cargas de trabajo de IA en entorno on-premise
 21 Horas

Número de participantes


Precio por participante

Reseñas (2)

Próximos cursos

Categorías Relacionadas