En el mundo acelerado de la inteligencia artificial, los LLMs (Modelos de Lenguaje de Gran Tamaño) se han convertido en herramientas imprescindibles para automatizar tareas complejas, como la redacción de contenido. Pero, ¿logran estos modelos escribir textos que realmente cautiven y conecten con el público? Para responder a esta pregunta, sometimos a prueba a tres LLMs – Claude Sonnet 3.5, ChatGPT-4o y Gemini 1.5 Pro – desafiándolos a crear un correo de bienvenida para nuevos clientes de "Tess".
La Misión: Crear un Correo que Conquiste
El objetivo era simple: generar un correo de bienvenida que fuera informativo, invitante y, sobre todo, humano. Para evaluar el desempeño de los LLMs, analizamos los correos generados en función de cuatro criterios esenciales para cada uno de los modelos:
El Prompt:
Utilizamos el chat Multi-LLM de Tess AI y proporcionamos el siguiente briefing para los modelos:
Los Resultados? ¡Una verdadera batalla de estilos!
Cada modelo imprimió su propia marca en el correo de bienvenida, revelando sus puntos fuertes y estilos distintos:
- Claude Sonnet 3.5 v2:
Calidad y Relevancia del Contenido: El correo de Claude Sonnet 3.5 presentó información relevante sobre la plataforma y sus beneficios, pero falló en detallar cómo el usuario puede comenzar a usar la herramienta de inmediato.
Personalización y Tono de Voz: El tono fue positivo y amigable, pero la personalización se limitó al uso del nombre del cliente.
Estructura, Organización y Escritura Humanizada: La estructura fue organizada, pero la escritura contenía frases "marketeras" y poco naturales.
Corrección Gramatical, Ortográfica y Efectividad: El correo estaba libre de errores gramaticales y ortográficos, pero la llamada a la acción fue poco específica.
- ChatGPT-4o:
Calidad y Relevancia del Contenido: ChatGPT-4o, por su parte, siguió la misma línea, destacando los beneficios de la plataforma, pero también dejó de presentar una guía práctica para el nuevo usuario.
Personalización y Tono de Voz: ChatGPT-4o también demostró un buen desempeño en el tono de voz, utilizando un lenguaje receptivo y entusiasta, pero la personalización se limitó al uso del nombre del cliente.
Estructura, Organización y Escritura Humanizada: La estructura fue organizada, pero algunas frases sonaron "rigidas" y faltó naturalidad.
Corrección Gramatical, Ortográfica y Efectividad: El correo estaba libre de errores gramaticales y ortográficos, y la llamada a la acción fue más específica, pero aún podría ser más dirigida.
- Gemini 1.5 Pro:
Calidad y Relevancia del Contenido: Gemini 1.5 Pro se destacó en este aspecto. El correo generado presentó información relevante y dirigida al usuario, abordando los beneficios de la plataforma e incluyendo una llamada a la acción clara para acceder a recursos y a la comunidad.
Personalización y Tono de Voz: Gemini 1.5 Pro optó por un tono más profesional (a pesar del exceso de emojis) y
menos personal, priorizando la presentación de la marca y sus recursos. Esta aproximación, aunque no tan cercana al usuario, se ajusta mejor a la propuesta de la plataforma. El modelo, sin embargo, falló en no presentar personalización además del uso del nombre del cliente.
Estructura, Organización y Escritura Humanizada: El correo generado por Gemini 1.5 Pro se destacó por presentar una estructura clara, un lenguaje más natural y cercano al usuario, y por evitar frases "marketeras". Sin embargo, el uso excesivo de emojis pudo haber perjudicado la formalidad del correo, llevándolo a ser menos profesional.
Corrección Gramatical, Ortográfica y Efectividad: El correo estaba libre de errores gramaticales y ortográficos, y la llamada a la acción fue clara y específica, incluyendo enlaces a recursos y a la comunidad.
La Batalla de los Gigantes: ¿Quién Lleva la Copa?
Gemini 1.5 Pro se destacó por presentar un lenguaje más natural y cercano al usuario, con una estructura organizada y una llamada a la acción clara y dirigida. Sin embargo, el uso excesivo de emojis y la falta de personalización perjudicaron la formalidad del correo, haciéndolo menos profesional. Claude Sonnet 3.5 y ChatGPT-4o, aunque tuvieron un gran desempeño, todavía presentan "vicios robóticos" como contenidos rígidos o adjetivos exagerados.
La Evolución de la Escritura de LLMs
Este análisis nos muestra que los LLMs están evolucionando rápidamente, pero aún queda un largo camino por recorrer para alcanzar la escritura natural y personalizada de un humano. La elección del LLM ideal para sus necesidades dependerá del tipo de texto que necesite generar y del público objetivo que desee alcanzar.
Recuerde, el objetivo final es construir relaciones sólidas con sus clientes, y la escritura humanizada y auténtica sigue desempeñando un papel fundamental en este proceso.