</> CodeBooks
    ← Volver a IA generativa y LLMs (página 3)
    Portada de Optimizing Generative AI Workloads for Sustainability

    Optimizing Generative AI Workloads for Sustainability

    Ishneet Kaur Dua, Parth Girish Patel

    Editorial
    Apress
    Año
    2024
    Páginas
    ~320
    Nivel
    Intermedio

    De qué trata

    Manual técnico centrado en la optimización energética, reducción de costes computacionales y mitigación del impacto ambiental generado por el despliegue de modelos de inteligencia artificial generativa a gran escala. Dirigido a ingenieros de machine learning, arquitectos de soluciones cloud y directores técnicos de nivel intermedio, el libro requiere conocimientos previos sobre plataformas en la nube (AWS, Azure o GCP) y ciclo de vida de modelos, enfocándose en cómo implementar prácticas de ingeniería sostenibles sin sacrificar el rendimiento ni la precisión de las inferencias.

    El contenido abarca transversalmente hardware, software y datos para minimizar la huella de carbono: selección eficiente de aceleradores de cómputo (GPUs y TPUs), planificación inteligente de cargas de trabajo y optimización de infraestructura en la nube. En el ámbito del software, aborda técnicas de compresión de modelos mediante cuantización (quantization en 4 y 8 bits), poda (pruning) y destilación de conocimiento para reducir el consumo de memoria; optimización del preprocesamiento y almacenamiento de datos; y estrategias de inferencia de baja energía tanto en la nube como en dispositivos edge (borde). Además, introduce métricas clave para la monitorización de emisiones y marcos de gobernanza responsable para auditar el impacto ambiental en cada fase del ciclo de vida de la IA.

    A través de sus guías y del repositorio oficial de código en GitHub, se implementan procesos de cuantización y compresión sobre modelos generativos existentes y se configuran flujos para medir el consumo energético y las emisiones de carbono asociadas a cargas de inferencia y entrenamiento. Su valor principal es tratar con rigor técnico el desafío ecológico y financiero del cómputo masivo en IA; deja fuera la fundamentación matemática para entrenar nuevos modelos base desde cero, ya que su prioridad es la eficiencia y el despliegue optimizado de arquitecturas ya existentes.

    • Sostenibilidad en IA
    • Eficiencia energética
    • Cuantización
    • Optimización de LLMs
    • Huella de carbono
    • Aceleradores de IA
    • Edge Computing
    • Cloud Computing
    • Compresión de modelos
    • MLOps verde

    ¿Cómo enseña?

    TeóricoPráctico

    Teoría + práctica

    • ✗ Sin ejercicios
    • ✓ Incluye proyectos

    Proyectos

    Auditoría de consumo energético y emisiones en la nube

    Flujo de medición y panel de métricas para calcular el consumo eléctrico y las emisiones de carbono derivadas de procesos continuos de inferencia y entrenamiento.

    Pipeline de cuantización y compresión para despliegues eficientes

    Implementación práctica de reducción de precisión a 4 y 8 bits y poda de pesos para ejecutar modelos generativos en entornos cloud y dispositivos edge de bajo consumo.

    Más de IA generativa y LLMs con nivel Intermedio