Matemáticas puras Q relevantes para LLMs: Los tokens no relacionados (como "perro" y "sol") deberían corresponder aproximadamente a vectores ortogonales en el espacio de incrustación. Entonces, en ℝ^k, ¿cuál es el número máximo de vectores ortogonales por pares? ¿Qué pasa si solo son "casi" ortogonales, así que ∣vi⋅vj∣<ε, ∀ i≠j?