Il y a environ deux mois, nous avons remplacé Google Traduction par un LLM pour la traduction de nos articles.
Pourquoi avoir choisi Claude ? Comment fonctionne le système ? Et pourquoi Claude plutôt que Gemini, qui est moins coûteux ?
Le projet est encore en phase d'expérimentation, mais je présente ici la configuration actuelle et la réflexion qui la sous-tend.
Google Traduction permet bien sûr de traduire
Précisons d'emblée que Google Traduction n'est pas un mauvais outil.
Il est rapide et suffisant pour un usage courant. Je n'ai pas rencontré de problème majeur jusqu'ici. En revanche, pour traduire un article dans son intégralité, la simple substitution des mots japonais par une autre langue ne donne pas le niveau de précision que permettent les IA actuelles, ce qui m'a laissé sur ma faim.
Phrase par phrase, la traduction n'est pas fausse, mais lue dans son ensemble, elle paraît parfois peu naturelle. Un même terme peut aussi être rendu différemment au fil du texte. Par ailleurs, les titres et slogans dont la mise en forme repose sur la typographie, comme ceux où chaque caractère est séparé, sont tout simplement cassés.
Il ne suffit pas que la traduction soit compréhensible : elle doit aussi se lire naturellement, comme un article rédigé directement en français, n'est-ce pas ?
Nous avons donc enfin fait le pas et sommes passés à la traduction automatique basée sur un LLM.
L'année dernière, nous avons déployé le site en plusieurs langues avec Google Traduction, et le DR est passé de 30 à 19.
La qualité de la traduction n'est pas la seule raison qui nous a poussés à passer à un LLM.
Lorsque nous avons traduit les articles avec Google Traduction, nous avons aussi modifié plusieurs éléments de la structure SEO. Mais comme nous avons ajouté huit langues d'un coup, le jus de lien s'est fortement dilué.
Le DR d'Ahrefs est passé de 30 à 19. 😨
Soit une baisse de 11 points.
La chute a été assez spectaculaire.
Bien sûr, la baisse du DR ne s'explique pas uniquement par l'utilisation de Google Traduction. Le véritable problème réside dans la conception SEO du site multilingue, y compris les URL et les liens internes. Revoir l'ensemble du dispositif de multilinguisme, y compris la méthode de traduction et la manière de gérer les articles traduits, est devenu une priorité absolue !
Le DR devrait être revenu au-dessus de 30 aujourd'hui, mais comme nous prévoyons de faire encore quelques tests, il pourrait bien rechuter. ;)
Hausse et baisse...
Après comparaison, c'est Claude qui a donné les meilleurs résultats pour nos articles.
Pour passer à la traduction par LLM, nous avons étudié plusieurs modèles et leur avons fait traduire des articles réels.
Nous avons principalement examiné les points suivants.
- La traduction se lit-elle naturellement ?
- Le modèle parvient-il à conserver le contexte sur les longs articles ?
- Parvient-il à unifier les termes et la notation ?
- Comprend-il le lien entre les titres et le corps du texte ?
- Respecte-t-il les règles de traduction indiquées ?
- Ajoute-t-il de son propre chef des contenus absents du texte d'origine ?
Après comparaison, la traduction de Claude nous a semblé la meilleure pour nos articles.
Il ne s'agit pas de dire que Claude est le meilleur de toutes les traductions au monde.
Ce sont simplement les résultats obtenus avec nos articles et nos critères d'évaluation. Selon le type de texte, sa longueur et le style recherché, les résultats peuvent varier.
Cette fois, nous avons privilégié un rendu naturel pour nos articles et adopté l'API Claude.
Si l'on ne regarde que le coût, Gemini est moins cher
Claude offrait une meilleure qualité de traduction, mais si l'on ne considère que le coût, Gemini est moins cher.
Nous n'avons pas décidé de garder Claude indéfiniment, mais nous commençons par l'utiliser, car sa qualité de traduction était la meilleure !
Ensuite, si Gemini peut atteindre la qualité requise, nous pourrons basculer vers lui !
Nous envisageons aussi d'utiliser plusieurs modèles selon le type d'article.
Ce type de fonctionnement fait également partie de nos réflexions.
Les LLM évoluent rapidement : le meilleur modèle aujourd'hui ne sera pas forcément le meilleur dans six mois.
Les performances comme les tarifs des modèles changent.
Utilisez de bons outils dès maintenant, et changez-les lorsque la situation évolue.
Je pense que, dans l'usage actuel de l'IA, cette juste distance est une bonne approche !
N'appeler l'API Claude que pour les articles non traduits
L'API Claude n'est pas appelée à chaque affichage d'un article.
Lors du build, les versions traduites des articles sont mises en cache, et les traductions déjà enregistrées sont renvoyées lors des fois suivantes. L'API Claude n'est appelée que pour les articles qui n'ont pas encore été traduits.
Si un article était traduit à chaque accès, des frais d'API seraient facturés à chaque fois. Le temps d'attente avant l'affichage serait également plus long.
Traduire uniquement les articles lorsque c'est nécessaire, et réutiliser les traductions déjà réalisées.
Avec cette approche, les frais d'utilisation de l'API et le temps d'affichage sont tous deux limités dans une certaine mesure.
Retraduire l'article après sa mise à jour
Si les résultats de traduction sont mis en cache, il faut aussi prévoir un traitement lorsque l'article original est mis à jour.
Ce serait problématique si, après avoir corrigé un article en japonais, la version traduite continuait d'afficher l'ancien contenu.
C'est pourquoi, lorsque le texte original change, nous ne réutilisons pas la traduction enregistrée : elle est refaite via l'API Claude.
Nous ajustons encore ces points au fil de leur utilisation concrète.
Conclusion
Pour la qualité de traduction, nous sommes pour l'instant satisfaits d'avoir choisi Claude. Cela dit, en fonction des coûts et de la précision, nous pourrions bien sûr passer à un autre modèle, comme ChatGPT ou Gemini, à un moment donné.
Les expérimentations se poursuivent ! Nous reviendrons sur les aspects liés au SEO dans un prochain article !
Président de l'entreprise, mais toujours du côté des praticiens. Passionné de terrain, j'éprouve une véritable joie à comprendre les nouvelles technologies ou à voir un outil devenir plus pratique, et je m'y plonge sans compter. Enthousiaste face aux technologies de demain, j'aime continuer à découvrir de nouvelles expériences, quel que soit mon âge.
Tadanori Morimoto
Chef de projet / Directeur artistique / Fondée en 2007