Tokenia

Tokenia · Material didáctico sobre tokens en IA

Desarrollado por Juan Pablo Tabone

Los tokenizadores y probabilidades de esta página son simulaciones educativas: los modelos reales usan vocabularios aprendidos (por ejemplo, BPE).