Esquecimento moderado beneficia o desempenho do modelo
Categories:
A série GPT5 tem alta taxa de recuperação, pode implementar lógica muito rigorosa, sendo excelente para depurar bugs, e ao mesmo tempo percebe prontamente contradições no contexto, uma experiência única entre os muitos modelos atuais. Mas recentemente, em meu projeto de engenharia reversa pessoal, descobri que a capacidade de engenharia reversa do GPT5 é limitada, claramente inferior ao modelo opus. Muitas vezes ele responde explicitamente que não funciona, enquanto trocar para o opus consegue implementar rapidamente a engenharia reversa de funcionalidades. O opus registra todo o seu processo de engenharia reversa como histórico de tentativas de operação, e após meus vários dias de uso intensivo, o documento histórico apresenta várias contradições. O GPT consegue não acreditar cegamente em uma instrução obsoleta, mas quando há muitas informações desatualizadas, o GPT5 tem dificuldade em lidar corretamente. Ou seja, a série GPT5 tem desempenho limitado em um projeto de baixa qualidade cheio de falhas, enquanto o opus ainda consegue manter seu desempenho relativamente bom.
