La mayoría de los pipelines de RL entrenan un agente completamente nuevo para cada tarea, gastando enormes cantidades de datos y computación y luego desechan esos pesos aprendidos una vez que cambian de entorno. ¿Por qué entrenar a la IA una vez cuando puede aprender para siempre? BlockAssist de Gensyn demuestra RL continuo descentralizado en una aplicación en vivo, un compañero de IA en Minecraft, que aprende de tu juego en tu dispositivo y luego mejora colectivamente a través de un enjambre de computación sin permisos. En contraste, la mayoría de los modelos grandes son ajustados con retroalimentación humana o enormes conjuntos de datos etiquetados en un pipeline centralizado. Por el contrario, BlockAssist cambia el guion. El aprendizaje ocurre a partir del flujo de juego de cada usuario, de manera continua y privada. - Por un lado, elimina la dependencia de enormes entrenamientos offline para cada nueva capacidad. El modelo se refina sobre la marcha. - También es inherentemente personalizado: mi BlockAssist podría desarrollar habilidades diferentes a las tuyas porque cada uno lo entrena con nuestro propio juego. Estamos esencialmente crowdsourcing la mejora de la IA de una manera que escala con los usuarios, lo cual es un paradigma muy diferente al ajuste fino de la IA centralizada. Además, somos notorios (especialmente en cripto) por hablar sobre la infraestructura y su potencial, pero Gensyn lo está demostrando con una aplicación real. BlockAssist es un hito importante que muestra lo que es posible cuando el RL, el aprendizaje continuo y la infraestructura descentralizada se unen.