
Optimizing Generative AI Workloads for Sustainability
Ishneet Kaur Dua, Parth Girish Patel
- Editorial
- Apress
- Año
- 2024
- Páginas
- ~320
- Nivel
- Intermedio
De qué trata
Manual técnico centrado en la optimización energética, reducción de costes computacionales y mitigación del impacto ambiental generado por el despliegue de modelos de inteligencia artificial generativa a gran escala. Dirigido a ingenieros de machine learning, arquitectos de soluciones cloud y directores técnicos de nivel intermedio, el libro requiere conocimientos previos sobre plataformas en la nube (AWS, Azure o GCP) y ciclo de vida de modelos, enfocándose en cómo implementar prácticas de ingeniería sostenibles sin sacrificar el rendimiento ni la precisión de las inferencias.
El contenido abarca transversalmente hardware, software y datos para minimizar la huella de carbono: selección eficiente de aceleradores de cómputo (GPUs y TPUs), planificación inteligente de cargas de trabajo y optimización de infraestructura en la nube. En el ámbito del software, aborda técnicas de compresión de modelos mediante cuantización (quantization en 4 y 8 bits), poda (pruning) y destilación de conocimiento para reducir el consumo de memoria; optimización del preprocesamiento y almacenamiento de datos; y estrategias de inferencia de baja energía tanto en la nube como en dispositivos edge (borde). Además, introduce métricas clave para la monitorización de emisiones y marcos de gobernanza responsable para auditar el impacto ambiental en cada fase del ciclo de vida de la IA.
A través de sus guías y del repositorio oficial de código en GitHub, se implementan procesos de cuantización y compresión sobre modelos generativos existentes y se configuran flujos para medir el consumo energético y las emisiones de carbono asociadas a cargas de inferencia y entrenamiento. Su valor principal es tratar con rigor técnico el desafío ecológico y financiero del cómputo masivo en IA; deja fuera la fundamentación matemática para entrenar nuevos modelos base desde cero, ya que su prioridad es la eficiencia y el despliegue optimizado de arquitecturas ya existentes.
- Sostenibilidad en IA
- Eficiencia energética
- Cuantización
- Optimización de LLMs
- Huella de carbono
- Aceleradores de IA
- Edge Computing
- Cloud Computing
- Compresión de modelos
- MLOps verde
¿Cómo enseña?
Teoría + práctica
- ✗ Sin ejercicios
- ✓ Incluye proyectos
Proyectos
Auditoría de consumo energético y emisiones en la nube
Flujo de medición y panel de métricas para calcular el consumo eléctrico y las emisiones de carbono derivadas de procesos continuos de inferencia y entrenamiento.
Pipeline de cuantización y compresión para despliegues eficientes
Implementación práctica de reducción de precisión a 4 y 8 bits y poda de pesos para ejecutar modelos generativos en entornos cloud y dispositivos edge de bajo consumo.

