Sumários
Semana 9
21 Abril 2022, 15:00 • Rodrigo Soares dos Santos
Laboratório: Cap2 do curso HF (Hugging Face)
semana 9
21 Abril 2022, 13:00 • António Manuel Horta Branco
Semântica distribucional de frases/textos. Bag of words (BOW): concatenação, soma, média, máximo. Rede Neuronal Convolucional (“CNN”): agregação, avanço, hierarquia, ligação de parâmetros, conexões-salto. Rede Neuronal Recorrente ("RNN"): estado interno, codificador, descodificador, seq-to-seg, transdução, explosão e desaparecimento de gradientes. Atenção: produto escalar e semelhança semântica, representação ponderada pelo contexto, ponderação pela tarefa, matrizes query-key-value. Transformer: sub-camadas de atenção, atenção multi-cabeça, paralelismo, vetores posicionais, transdução, máscara no descodificador.
Semana 7
7 Abril 2022, 15:00 • Rodrigo Soares dos Santos
Laboratório: Cap1, sec 2 do curso HF (Hugging Face)