Raciocinar passo a passo
Porque é que pedir as etapas intermédias melhora as respostas a problemas com várias etapas.
ObjetivoExplicar o efeito do raciocínio passo a passo e saber quando o pedir.
Um modelo produz a sua resposta token a token. Se escrever diretamente o resultado de um problema com várias etapas, tem de fazer tudo de uma só vez. Se escrever primeiro as etapas, cada uma serve-lhe de apoio para a seguinte.
Em 2022, investigadores mostraram que dar alguns exemplos de raciocínios detalhados no pedido melhora claramente os resultados em aritmética, em lógica e em senso comum, sobretudo nos grandes modelos. Os modelos recentes ditos de raciocínio fazem este trabalho por si próprios, antes de responder.
Qual é o custo anual se 12 pessoas utilizarem a oferta a 24 CHF por mês com 15% de desconto?
Calcula passo a passo: o custo mensal por pessoa, depois para 12 pessoas, depois ao longo de doze meses, e depois aplica o desconto. Mostra o detalhe.
Cada etapa passa a ser verificável, e um erro identifica-se no ponto onde ocorre.
Quando não é útil
- Para uma pergunta simples ou uma reformulação, as etapas alongam a resposta sem a melhorar.
- Um raciocínio bem escrito pode continuar errado. As etapas facilitam a verificação, não a substituem.
Referências
- Wei, Wang, Schuurmans et al. (2022). Chain-of-Thought Prompting Elicits Reasoning in Large Language Models. Advances in Neural Information Processing Systems 35, p. 24824–24837. arxiv.org/abs/2201.11903