Większość pipeline'ów RL trenuje nowego agenta dla każdego zadania, wydając ogromne ilości danych i mocy obliczeniowej, a następnie wyrzucając te wyuczone wagi, gdy zmieniasz środowisko. Po co trenować AI raz, gdy może uczyć się na zawsze? BlockAssist od Gensyn udowadnia zdecentralizowane ciągłe RL w aplikacji na żywo, jako AI towarzyszące w Minecraft, które uczy się z twojej rozgrywki na twoim urządzeniu, a następnie poprawia się zbiorowo za pomocą bezzezwoleniowego roju obliczeniowego. W przeciwieństwie do tego, większość dużych modeli jest dostosowywana za pomocą ludzkiej informacji zwrotnej lub ogromnych oznaczonych zbiorów danych w scentralizowanym pipeline. Z drugiej strony, BlockAssist zmienia zasady gry. Uczenie się odbywa z samego strumienia rozgrywki każdego użytkownika, ciągle i prywatnie. - Po pierwsze, eliminuje to zależność od ogromnych offline'owych sesji treningowych dla każdej nowej funkcjonalności. Model doskonali się na bieżąco. - Jest również z natury spersonalizowany: mój BlockAssist może rozwijać inne umiejętności niż twój, ponieważ każdy z nas trenuje go na własnej rozgrywce. W zasadzie crowdsourcingujemy poprawę AI w sposób, który skaluje się z użytkownikami, co jest bardzo różnym paradygmatem od scentralizowanego dostosowywania AI. Ponadto, jesteśmy znani (szczególnie w kryptowalutach) z mówienia o infrastrukturze i jej potencjale, ale Gensyn udowadnia to za pomocą prawdziwej aplikacji. BlockAssist to ważny kamień milowy, który pokazuje, co jest możliwe, gdy RL, ciągłe uczenie się i zdecentralizowana infrastruktura łączą się.
Ben Fielding
Ben Fielding6 sie, 22:46
przedstawiamy BlockAssist - pierwszą demonstrację zdecentralizowanego uczenia asystencyjnego w Minecraft wkrótce każda aplikacja będzie pasywnie trenować indywidualne lokalne modele bezpośrednio do preferencji użytkowników i globalnie poprawiać się między użytkownikami w ramach zdecentralizowanej infrastruktury należącej do wszystkich
3,8K