Hầu hết các pipeline RL đào tạo một tác nhân hoàn toàn mới cho mỗi nhiệm vụ, tiêu tốn một lượng lớn dữ liệu và tính toán, và sau đó vứt bỏ những trọng số đã học khi bạn chuyển đổi môi trường. Tại sao lại đào tạo AI một lần khi nó có thể học mãi mãi? BlockAssist của Gensyn chứng minh RL liên tục phi tập trung trong một ứng dụng trực tiếp, một người bạn AI trong Minecraft, học từ cách chơi của bạn trên thiết bị của bạn và sau đó cải thiện một cách tập thể thông qua một đàn tính toán không cần phép. Ngược lại, hầu hết các mô hình lớn được tinh chỉnh với phản hồi của con người hoặc các tập dữ liệu gán nhãn khổng lồ trong một pipeline tập trung. Ngược lại, BlockAssist đảo ngược kịch bản. Việc học diễn ra từ chính luồng gameplay của từng người dùng, liên tục và riêng tư. - Đầu tiên, nó loại bỏ sự phụ thuộc vào các phiên đào tạo offline khổng lồ cho mỗi khả năng mới. Mô hình tự tinh chỉnh ngay lập tức. - Nó cũng mang tính cá nhân hóa: BlockAssist của tôi có thể phát triển các kỹ năng khác với của bạn vì chúng tôi mỗi người đều đào tạo nó trên gameplay của riêng mình. Chúng tôi thực sự đang crowdsourcing cải tiến AI theo cách mà quy mô với người dùng, điều này rất khác biệt so với việc tinh chỉnh AI tập trung. Ngoài ra, chúng tôi nổi tiếng (đặc biệt trong crypto) nói về cơ sở hạ tầng và tiềm năng của nó, nhưng Gensyn đang chứng minh điều đó với một ứng dụng thực tế. BlockAssist là một cột mốc quan trọng cho thấy những gì có thể xảy ra khi RL, học liên tục và cơ sở hạ tầng phi tập trung kết hợp với nhau.
Ben Fielding
Ben Fielding22:46 6 thg 8
giới thiệu BlockAssist - buổi trình diễn đầu tiên về học tập hỗ trợ phi tập trung trong Minecraft sớm thôi, mọi ứng dụng sẽ tự động đào tạo các mô hình địa phương riêng lẻ trực tiếp theo sở thích của người dùng và cải thiện toàn cầu giữa các người dùng thông qua một cơ sở hạ tầng phi tập trung thuộc sở hữu của mọi người
3,77K