LSTM is dead. Long Live Transformers!
Seattle Applied Deep Learning · 4 recomendações no HN
Perguntas sobre o vídeo
Peça à IA para explicar esta cena ou resumir o vídeo inteiro. Se a resposta tiver marcações de tempo, selecione uma para ir ao trecho.
Experimente perguntar: O que a pessoa está explicando aqui?
Entre com o Google. Confira o custo máximo em créditos antes de confirmar.
Leo Dirac explains how transformer models have replaced LSTMs in NLP. He gives background from bag of words through RNNs and LSTMs, then a technical deep dive into multi-headed self-attention and positional encoding, with sample code.
Por que o HN recomenda: Recommended as a clear explanation of why RNNs fall short and how transformers solve it.
“has gotten tons of compliments and keeps people watching year after year” Ler no HN ↗