Biblioteca · Paper · 2023 · NeurIPS (arXiv:2303.11366)

Reflexion: Language Agents with Verbal Reinforcement Learning

Noah Shinn, Federico Cassano, Edward Berman, Ashwin Gopinath, Karthik Narasimhan, Shunyu Yao

Mostra que um agente pode aprender com os próprios erros sem precisar retreinar o modelo, só refletindo e anotando lições. É aprendizado barato e em tempo real.

A leitura do Thiago

Reflexion responde a uma pergunta que todo gestor faz: meu sistema de IA aprende com os erros ou repete a mesma besteira eternamente? A resposta dos autores é elegante. O agente tenta uma tarefa, falha, e em vez de simplesmente tentar de novo, ele escreve para si mesmo uma lição em linguagem natural sobre o que deu errado.

Essa lição vai para a memória e guia a próxima tentativa. É o equivalente a um funcionário que, depois de um erro, anota no caderno o que não fazer de novo, e consulta esse caderno antes da próxima decisão. O detalhe que muda tudo para o bolso é este: não precisa retreinar o modelo, que é caro, lento e exige especialistas raros.

O aprendizado acontece na camada de memória, em tempo de execução, quase de graça. Para uma empresa brasileira que não tem orçamento de big tech, isso é libertador. Você pode ter agentes que melhoram com o uso sem montar uma operação de machine learning pesada.

A leitura executiva é direta: a inteligência prática de um agente não mora só no modelo, mora no jeito como ele guarda e revisita as próprias falhas. Memória bem desenhada vale mais que modelo maior.

arquitetura-cognitivaatuaisagentesmemoriaaprendizado
Ler o paper original →
O que você achou desta página?
Recomendaria esta página para alguém do seu time?