A maioria dos pipelines de RL treina um agente completamente novo para cada tarefa, gastando enormes quantidades de dados e computação e depois descarta esses pesos aprendidos assim que você muda de ambiente. Por que treinar IA uma vez quando ela pode aprender para sempre? O BlockAssist da Gensyn prova o RL contínuo descentralizado em um aplicativo ao vivo, um companheiro de IA no Minecraft, que aprende com o seu jogo no seu dispositivo e depois melhora coletivamente através de um enxame de computação sem permissão. Em contraste, a maioria dos grandes modelos é ajustada com feedback humano ou enormes conjuntos de dados rotulados em um pipeline centralizado. Por outro lado, o BlockAssist inverte o script. O aprendizado acontece a partir do próprio fluxo de jogo de cada usuário, continuamente e de forma privada. - Por um lado, remove a dependência de enormes execuções de treinamento offline para cada nova capacidade. O modelo se refina em tempo real. - Também é inerentemente personalizado: meu BlockAssist pode desenvolver habilidades diferentes das suas porque cada um de nós o treina com nosso próprio jogo. Estamos essencialmente fazendo crowdsourcing da melhoria da IA de uma maneira que escala com os usuários, o que é um paradigma muito diferente do ajuste fino centralizado da IA. Além disso, somos notórios (especialmente em cripto) por falarmos sobre infraestrutura e seu potencial, mas a Gensyn está provando isso com um aplicativo real. O BlockAssist é um marco importante que mostra o que é possível quando RL, aprendizado contínuo e infraestrutura descentralizada se juntam.