Só prevê a palavra seguinte
Não há um plano geral: o modelo calcula probabilidades para a palavra seguinte, escolhe uma e recomeça. Encadeando milhares destas decisões, surgem respostas que parecem pensadas.
05 Laboratório
Um modelo de linguagem só faz uma coisa: calcular que palavra vem a seguir. Brinca com as probabilidades, mexe na temperatura e vê-o decidir em direto.
Escolhe um cenário
O céu está ___
Probabilidade da palavra seguinte
01
Não há um plano geral: o modelo calcula probabilidades para a palavra seguinte, escolhe uma e recomeça. Encadeando milhares destas decisões, surgem respostas que parecem pensadas.
É uma operação matemática que espalha ou concentra a probabilidade antes de lançar o dado. Aqui usamos a fórmula real: cada barra é elevada a 1/T e renormalizada.
Quando a temperatura sobe, as opções improváveis ganham terreno. Se uma for escolhida, o modelo continua-a com toda a confiança, como se fosse verdade.
02