La plupart des pipelines RL entraînent un tout nouvel agent pour chaque tâche, dépensant d'énormes quantités de données et de calcul, puis jettent ces poids appris une fois que vous changez d'environnement. Pourquoi entraîner l'IA une fois alors qu'elle pourrait apprendre pour toujours ? Le BlockAssist de Gensyn prouve le RL continu décentralisé dans une application en direct, un compagnon IA dans Minecraft, qui apprend de votre gameplay sur votre appareil et s'améliore ensuite collectivement via un essaim de calcul sans autorisation. En revanche, la plupart des grands modèles sont ajustés avec des retours humains ou d'énormes ensembles de données étiquetées dans un pipeline centralisé. En revanche, BlockAssist renverse la situation. L'apprentissage se fait à partir du flux de gameplay de chaque utilisateur lui-même, de manière continue et privée. - D'une part, cela supprime la dépendance à d'énormes sessions d'entraînement hors ligne pour chaque nouvelle capacité. Le modèle se perfectionne en temps réel. - Il est également intrinsèquement personnalisé : mon BlockAssist pourrait développer des compétences différentes des vôtres parce que nous l'entraînons chacun sur notre propre gameplay. Nous sommes essentiellement en train de crowdsourcer l'amélioration de l'IA d'une manière qui évolue avec les utilisateurs, ce qui est un paradigme très différent de l'ajustement centralisé de l'IA. De plus, nous sommes notoires (surtout dans la crypto) pour parler des infrastructures et de leur potentiel, mais Gensyn le prouve avec une véritable application. BlockAssist est une étape majeure montrant ce qui est possible lorsque le RL, l'apprentissage continu et l'infrastructure décentralisée se rejoignent.