No treinamento de grandes modelos de linguagem (LLMs), como o GPT-4, uma técnica importante, utilizada para estabilizar o treinamento e favorecer a convergência - especialmente ao lidar com camadas profundas -, é a normalização por camada, conhecida como Layer Normalization, que consiste em:
Questão 77 – Tecnologia da Informação – FGV 2024 – Tribunal de Contas do Estado de Pernambuco (Auditor de Controle Externo)
Comentários
Ainda não há comentários publicados.
Atalhos de teclado
- A–E ou 1–5 selecionam a alternativa.
- C ou E marcam Certo ou Errado.
- Enter responde.
- Seta para a direita ou esquerda abre a próxima ou a anterior.
- X elimina a alternativa em foco.
Reportar problema
Treine com histórico e revisão
No app, seus erros voltam para revisão e você acompanha o desempenho por disciplina.