Trilha de aprendizagem

Do texto aos tensores

Veja como o texto se transforma em tokens, vetores e estruturas numéricas que uma rede neural consegue processar.

02

Do texto aos tensores

Veja como o texto se transforma em tokens, vetores e estruturas numéricas que uma rede neural consegue processar.

  1. 02.01Por que computadores não sabem ler
  2. 02.02Tokenization I: caracteres, palavras e subpalavras
  3. 02.03Tokenization II: BPE, passo a passo
  4. 02.04Tokenization III: SentencePiece, byte-level e por que a contagem de tokens morde
  5. 02.05Embeddings: significado como geometria
  6. 02.06word2vec, GloVe e o truque da analogia
  7. 02.07Entropia, perplexity e o que significa 'bom'