Ventura Labs Ep. 50 - Steffen Cruz y Felix Quinque Felix Quinque, Líder de IA, y Steffen Cruz (@macrocrux), CTO y Co-Fundador de Macrocosmos (@MacrocosmosAI) Tiempos: 1:24 – Introducción 2:12 – Transición de Subred 9 a IOTA 2:47 – El Problema: Entrenamiento de Modelos de Lenguaje Grande 4:51 – Visión General de Grupos de Capas 5:02 – Definiendo una Capa en un LLM 6:07 – Capa vs. Particionamiento de Conjuntos de Datos 7:21 – Distribución de Datos entre Mineros 10:08 – Introduciendo Paralelismo de Pipeline 11:18 – Orquestador: Programación y Coordinación 15:44 – Validación: Auditorías Sombra 19:39 – Futuro del Proceso de Validación 24:51 – Importancia de la Compresión de Activación 31:30 – Explicación de Butterfly All-Reduce 36:43 – Logros más Orgullosos de la Subred 9 39:33 – Definiendo el Éxito para la Subred de IOTA 46:21 – Consejos para Equipos de Cero a Uno 52:16 – Conclusión y Agradecimientos