Hace unos dos meses, cambiamos la traducción de nuestros artículos de Google Translate a un LLM.
Por qué elegimos Claude. Cómo funciona el sistema. Y por qué optamos por Claude en lugar de Gemini, que es más económico.
Aunque todavía estamos en fase de experimentación, aquí resumimos la configuración actual y nuestro enfoque.
Por supuesto, Google Translate también puede traducir
Para empezar, conviene aclarar que Google Translate no era un problema.
Es rápido y, para un uso habitual, resulta más que suficiente. Hasta ahora no habíamos tenido grandes problemas, pero al traducir artículos completos, reemplazar simplemente el japonés por otro idioma nos parecía insuficiente en comparación con la precisión que ofrecen los modelos de IA actuales.
Frase por frase, las traducciones no eran incorrectas, pero leídas como un artículo completo sonaban algo antinaturales, y la forma de traducir una misma palabra podía cambiar a mitad del texto. Además, los titulares y textos de diseño que se separan letra por letra se rompían.
No basta con que la traducción tenga sentido: tiene que leerse de forma natural, como si el artículo se hubiera escrito originalmente en español.
Así que, aunque con retraso, hemos decidido cambiar a la traducción automática basada en LLM.
El año pasado ampliamos el contenido a varios idiomas con Google Translate, y el DR pasó de 30 a 19.
El motivo para cambiar a un LLM no fue solo la calidad de la traducción.
Al traducir los artículos a varios idiomas con Google Translate, también modificamos bastante la estructura de SEO, pero como pasamos a ocho idiomas de golpe, el flujo de enlaces (link juice) se redujo drásticamente.
El DR de Ahrefs bajó de 30 a 19. 😨
Son 11 puntos menos.
La caída fue bastante notable.
Por supuesto, no se trata solo de que el DR bajara por usar Google Translate, pero el problema está en el diseño de SEO del sitio multilingüe, incluidas las URL y los enlaces internos. Revisar todo el sistema de multilingüismo, incluidos el método de traducción y la forma de gestionar los artículos traducidos, es una prioridad urgente.
Ahora el DR debería haber vuelto a 30 o más, pero como tenemos previsto hacer algunas pruebas más, es probable que vuelva a bajar. w
Subidas y bajadas...
Tras comparar los resultados, Claude fue el que mejor funcionó con nuestros artículos.
Para pasar a la traducción con LLM, investigamos varios modelos y pusimos a prueba la traducción de artículos reales.
Los aspectos que revisamos fueron principalmente los siguientes.
- Si el texto traducido se lee con naturalidad
- Si mantiene el contexto en artículos largos
- Si puede unificar la terminología y la notación
- Si entiende la relación entre los títulos y el cuerpo del texto
- Si sigue las reglas de traducción indicadas
- Si añade por su cuenta contenido que no aparece en el original
Tras comparar los resultados, en nuestros artículos la traducción de Claude nos pareció la mejor opción.
No se trata de afirmar que Claude sea el mejor en cualquier traducción del mundo.
Se trata únicamente del resultado de nuestras pruebas con nuestros artículos y criterios de evaluación. Creemos que el resultado puede variar según el tipo y la extensión del texto a traducir, y el estilo que se requiera.
En esta ocasión, dimos prioridad a que el texto resultara natural como artículo y optamos por la API de Claude.
Si solo miramos el coste, Gemini es más barato
Claude ofreció mejor calidad de traducción, pero si solo miramos el coste, Gemini es más barato.
No hemos decidido usar Claude de forma permanente, pero por ahora vamos a operar con Claude, que nos dio mejor calidad de traducción.
Después, si Gemini también puede cumplir con la calidad necesaria, cambiaremos a él.
O también estamos considerando usar varios modelos según el tipo de artículo.
Es un tipo de operación que también estamos valorando.
Los LLM cambian con rapidez, así que el modelo que mejor resulta hoy no tiene por qué seguir siendo el mejor dentro de seis meses.
El rendimiento y los precios de los modelos también cambian.
Usa herramientas buenas ahora y cámbialas cuando cambie la situación.
Creo que, hoy en día, esa es una buena distancia para usar la IA.
Llamar a la API de Claude solo para los artículos que aún no están traducidos
No se llama a la API de Claude cada vez que se muestra un artículo.
Durante la compilación, las versiones traducidas de los artículos se almacenan en caché y, a partir de la siguiente vez, se devuelven las traducciones guardadas. La API de Claude solo se llama para los artículos que todavía no han sido traducidos.
Si se tradujera cada vez que alguien accede al mismo artículo, se generaría un coste de API en cada visita. Además, el tiempo de espera hasta que se muestra la página sería mayor.
Traducir solo los artículos que se necesitan y reutilizar las traducciones ya realizadas.
Con este enfoque, se puede reducir en cierta medida tanto el coste de uso de la API como la velocidad de visualización.
Volver a traducir al actualizar el artículo
Si se almacenan en caché los resultados de la traducción, también es necesario un proceso para cuando se actualiza el artículo original.
Sería un problema si corrigiera un artículo en japonés y la versión traducida siguiera mostrando el contenido anterior.
Por eso, cuando cambia el texto original, no utilizamos la traducción guardada y volvemos a traducirlo con la API de Claude.
Estamos ajustando esto a medida que lo usamos en la práctica.
Conclusión
En cuanto a la calidad de la traducción, hasta ahora estamos contentos con haber elegido Claude. Sin embargo, teniendo en cuenta el coste y la precisión, es posible que en algún momento cambiemos a modelos como ChatGPT o Gemini.
La experimentación continúa. ¡Escribiremos más sobre SEO en otro artículo!
Aunque soy el director general, siempre trabajo como contraparte. Disfruto entender nuevas tecnologías y sentir alegría cuando algo se vuelve más práctico, y me sumerjo en el trabajo de campo con total entusiasmo. Me emociona el futuro de la tecnología y disfruto vivir nuevas experiencias sin importar la edad.
Tadanori Morimoto
Gerente de proyectos / Director creativo / Fundada en 2007