NOTE DE RECHERCHE14 octobre 2026
Token Ratios of the European Union's Official Languages Across Nine 2026 Tokenizers, and an Exploratory Tokenizer Transplant (s’ouvre dans un nouvel onglet)
Thomas Serval
Pour un même texte, les 23 langues officielles de l'UE autres que l'anglais demandent 1,18 à 1,98 fois plus de tokens que l'anglais selon le tokenizer. Le grec, le letton, l'irlandais et le maltais paient le plus ; les tokenizers européens de recherche réduisent l'écart jusqu'à 30 %.
