GPT-3 (2020)
175B params. Provou few-shot learning — o modelo não precisa fine-tune, basta dar exemplos no prompt.
RESUMO
Brown et al., 2020. Iniciou a era 'prompt engineering'. API privada gerou o ecossistema OpenAI. ChatGPT (Nov 2022) era GPT-3.5 instrucionado.
Tags: few-shot · scale-emergence · 175b
VEJA TAMBÉM