Estou surpreso que a OpenAI Comms tenha aprovado isto: GPT-5 "antecipa um ciclo de autoaperfeiçoamento recursivo" No Quadro de Preparação da OpenAI, o autoaperfeiçoamento recursivo é um risco Crítico (se a uma certa taxa), o que exigiria "parar o desenvolvimento adicional".
ControlAI
ControlAI8/08, 01:45
Sebastien Bubeck da OpenAI afirma que os métodos que a OpenAI usou para treinar o GPT-5 "antevê um ciclo de autoaperfeiçoamento recursivo".
Para ser claro, parece que Sebastien não está a descrever um loop especialmente rápido. Ele também está a falar sobre antecipação, não estando aqui hoje per se. Ainda assim, fiquei surpreendido que a OpenAI usasse este termo sobre a sua IA. Depois percebi que também é usado em "A Singularidade Gentil".
@CJKRaymond Por exemplo, se uma técnica como esta causasse um grande aumento na geração de modelos (porque a OAI não está mais limitada por dados HQ limitados), isso atenderia à definição de indicador defasado. De qualquer forma, não estou dizendo que isso é um RSI perigoso! Estou apenas surpreso que a OAI não tenha vetado esta descrição.
14,9K