Llama 3.2 necesita 8 tokens por palabra en bengalí, Gemma 3 solo uno
Los modelos de IA muestran disparidades drásticas en eficiencia de tokenización al procesar bengalí. Llama 3.2 requiere ocho tokens por palabra, mientras Gemma 3 logra uno, afectando rendimiento y costos.
5 min lectura2semIAOnda Redaccion
