large language model (LLM)
siglaprogramaçãocultura de operações
Um modelo treinado em enormes quantidades de texto para prever o que vem a seguir, o que acaba bastando para fazer muitas outras coisas.
A capacidade que surpreende as pessoas é emergente, não projetada: ninguém escreveu regras para resumir, traduzir ou escrever código. Vale ter isso em mente ao ler afirmações sobre o que esses sistemas 'entendem' - previsão do próximo token em escala é o que de fato acontece, e o quanto isso explica é genuinamente contestado.
Também conhecido como: llm, language model
Fontes
- Vaswani et al., 'Attention Is All You Need' (2017)