Trilha de aprendizagem
Do texto aos tensores
Veja como o texto se transforma em tokens, vetores e estruturas numéricas que uma rede neural consegue processar.
Do texto aos tensores
Veja como o texto se transforma em tokens, vetores e estruturas numéricas que uma rede neural consegue processar.
- 02.01Por que computadores não sabem ler→
- 02.02Tokenization I: caracteres, palavras e subpalavras→
- 02.03Tokenization II: BPE, passo a passo→
- 02.04Tokenization III: SentencePiece, byte-level e por que a contagem de tokens morde→
- 02.05Embeddings: significado como geometria→
- 02.06word2vec, GloVe e o truque da analogia→
- 02.07Entropia, perplexity e o que significa 'bom'→