O canal do YouTube de Andrej Karpathy é um hub gratuito de aprendizado de IA. Min Choi deu um nome ao seu vídeo e deu um motivo. Coleção sugerida.

5. Crie o GPT Tokenizer - Princípios básicos do BPE Por que os tokens são necessários, como o BPE funciona e por que ele revolucionou o treinamento e a inferência. A escolha do Tokenizer determina o tamanho da lista de palavras, a eficiência contextual e a estabilidade do treinamento – algo que deve ser aprendido antes de aumentar a escala.