Um pequeno tutorial de transformers usando exemplos.
- Ter um material com exemplos simples facilmente expansivel para problemas reais.
- Aprendendo Pytorch: https://www.kaggle.com/code/tauseef6462/simple-feedforward-neural-network-using-pytorch
- Fazendo um Bert do zero: https://medium.com/data-and-beyond/complete-guide-to-building-bert-model-from-sratch-3e6562228891
- Why multi-head self attention works: math, intuitions and 10+1 hidden insights: https://theaisummer.com/self-attention/
- Exemplo de tradutor: https://colab.research.google.com/drive/1dBIKowtIEhM8MaPgDTkBvPLhikCuxOsU?usp=sharing#scrollTo=pfiaXP9eDbQB
- Livro sobre processamento de linguagem natural: https://brasileiraspln.com/livro-pln/1a-edicao/
- Explicação ilustrada sobre Transformer: http://jalammar.github.io/illustrated-transformer/
- Como implementar um word2vec: https://www.computersciencemaster.com.br/como-implementar-o-word2vec-em-python/
- Lista de ferramentas de NLP para portugues: https://github.com/ajdavidl/Portuguese-NLP
- Lista de palavras no espaço word2vec: http://projector.tensorflow.org/
- Felipe Gustavo Bombardelli
- Luan Matheus Trindade Dalmazo