Bây giờ GPT-5 đã ra mắt, bạn nghĩ tôi đã làm như thế nào? Dự đoán của tôi về mô hình có đúng không?
Matt Shumer
Matt Shumer15 thg 4, 2024
Dự đoán của tôi về khả năng của GPT-5: Từ ít thú vị nhất đến thú vị nhất: - độ dài ngữ cảnh dài hơn đáng kể + khả năng sử dụng nó hiệu quả hơn nhiều (tức là khả năng suy luận qua các mũi kim trong bài kiểm tra đống rơm) - đa phương thức hơn nhiều (cả về số lượng các phương thức và độ ‘sâu’ của từng phương thức) - đầu ra đa phương thức, mặc dù tôi đoán một số phương thức sẽ bị vô hiệu hóa khi ra mắt (an toàn, v.v.) - hãy tưởng tượng nói chuyện trực tiếp với GPT-5, và nó sẽ phản hồi lại, mà không cần sử dụng Whisper hoặc Voice Engine - đột phá trong suy luận Q* - Hai chế độ: suy luận + bình thường — Q* có thể mất thời gian/chi phí suy luận đáng kể, vì vậy trừ khi có một đột phá về hiệu suất, họ cũng có thể cung cấp một chế độ phản hồi bình thường như chúng ta thấy hôm nay - Tương tự, GPT-5 có thể có một hình thức tính toán thích ứng/Q* tiên tiến hơn… câu hỏi càng khó, nó càng cung cấp nhiều sức mạnh hơn để đưa ra giải pháp tốt - khả năng tác động tốt hơn gấp 10 lần… các tác nhân đơn giản/hạn chế sẽ được giải quyết phần lớn, và chúng ta sẽ tiến gần hơn đến các tác nhân tổng quát, thực tế - khả năng quay ngược lại — ngoài việc phản ánh, GPT-5 sẽ có khả năng nhận ra sai lầm khi trả lời và điều chỉnh hướng đi - mức độ mạch lạc điên rồ qua dữ liệu dài hạn… chúng ta sẽ bắt đầu nghĩ ít hơn về việc sử dụng các hệ thống riêng biệt để kích hoạt trí nhớ và nhiều hơn về việc chỉ nhúng tất cả trí nhớ vào lời nhắc… điều này cũng sẽ thúc đẩy các tác nhân tiến lên - với ba điểm cuối này, bạn sẽ có thể để GPT-5 một mình và để nó thực hiện các nhiệm vụ phức tạp cho bạn, và tin rằng nó thực sự làm đúng mà không cần kiểm tra công việc của nó - được đào tạo trên một lượng dữ liệu nhiều hơn OOM so với các mô hình trước, phần lớn trong số đó được thu thập từ ChatGPT, được làm sạch, cải thiện, chuyển sang các phương thức khác, v.v. - được đào tạo sau trên dữ liệu *tốt hơn* nhiều so với các mô hình hàng đầu hiện tại - chúng ta sẽ bắt đầu thấy những cái nhìn thoáng qua về khả năng vượt xa những gì chúng ta nói hôm nay — ví dụ, nó sẽ có khả năng gần như có thể sử dụng để thực hiện nghiên cứu khoa học Tôi đã bỏ lỡ điều gì? Bạn nghĩ sao? Hãy trả lời và cho tôi biết.
6,44K