En el ámbito de la inteligencia artificial generativa hay una competencia que sobresale: ChatGPT vs. Gemini. Estos chatbots comparten numerosas habilidades que, no mucho tiempo atrás, parecían exclusivas de los humanos. Pueden mantener conversaciones con tono natural y escribir código de programación. También redactan textos y correos electrónicos, y resumen documentos, entre otras capacidades. Al aproximarnos a esa rivalidad, cabe la pregunta acerca de la eficiencia. ¿Cuál es mejor? ¿El creado por OpenAI o el que desarrolla Google?
Hipertextual puso a prueba a los paradigmas entre los bots conversacionales para echar luz sobre sus puntos álgidos y sus falencias. Los hemos testeado en tareas del día a día, en las que esos sistemas son hábiles asistentes. Naturalmente, el desempeño se ajustó a las instrucciones —“prompts”, en la jerga— que hemos indicado en cada caso. En este punto, vale mencionar que empleamos indicaciones idénticas en ambos sistemas, para que las conclusiones sean equitativas.
Cabe señalar, además, que en esta comparativa “ChatGPT vs. Gemini” usamos las versiones gratuitas de ambos modelos, para que nuestras deducciones sean de utilidad para un público amplio. En el caso del chatbot de OpenAI, echamos mano al que opera con el modelo de lenguaje masivo (LLM) GPT 3.5. En el de Google, la versión regular; no la Advanced 1.0 Ultra, que requiere una suscripción.
ChatGPT vs. Gemini: ¿cuál es mejor al redactar correos electrónicos?
Para probar la eficiencia de los chatbots a la hora de redactar correos, hemos tomando el rol de una agencia de prensa que precisa enviar una notificación a periodistas, invitándolos a un evento de presentación. Tal como señalamos, las instrucciones fueron las mismas en ChatGPT y Gemini.
El modelo de Google arrojó el siguiente resultado:
Asunto: Invitación a presentación exclusiva: El futuro de la tecnología a su alcance
Estimado/a [Nombre del periodista],
Le escribimos con gran entusiasmo para invitarle a una presentación exclusiva que marcará un antes y un después en el mundo de la tecnología. El próximo [Día de la semana] [Fecha], a las [Hora], tendremos el placer de presentarle un nuevo servicio revolucionario basado en inteligencia artificial que cambiará la forma en que vivimos, trabajamos y nos relacionamos.
El evento se llevará a cabo en la ciudad de Buenos Aires, en un lugar que revelaremos en las próximas semanas. Le aseguramos que será un espacio elegante y moderno, ideal para disfrutar de una experiencia única.
Durante la presentación, tendrá la oportunidad de conocer en detalle las características y aplicaciones de este innovador servicio, así como de presenciar demostraciones en vivo que le permitirán comprender su enorme potencial. Además, tendrá la posibilidad de interactuar con expertos en inteligencia artificial y con otros profesionales del sector.
No queremos revelar demasiados detalles por ahora, ya que queremos mantener el misterio y la emoción hasta el gran día. Sin embargo, le podemos adelantar que se trata de un servicio que tiene el potencial de transformar industrias enteras y de mejorar significativamente la vida de las personas.
Estamos seguros de que esta presentación será de gran interés para usted y para su medio de comunicación. Por lo tanto, le rogamos que confirme su asistencia a la brevedad posible, ya que el cupo es limitado.
Para confirmar su asistencia, por favor, contacte con [Nombre del contacto] a través de [Correo electrónico] o [Teléfono].
Esperamos poder contar con su presencia en este evento tan especial.
Atentamente,
[Nombre de la empresa]
En esta comparativa entre ChatGPT y Gemini, el modelo de inteligencia artificial de OpenAI generó el siguiente correo en respuesta a nuestro pedido.
Asunto: Invitación a la Presentación Exclusiva de un Innovador Servicio Basado en Inteligencia Artificial
Estimado/a [Nombre del Periodista],
Es un placer dirigirme a usted en esta ocasión para extenderle una cordial invitación a un evento de presentación muy especial que estamos organizando para el próximo 10 de junio en la vibrante ciudad de Buenos Aires.
En esta exclusiva reunión, tendremos el honor de presentarle un servicio pionero basado en inteligencia artificial que estamos seguros despertará su interés y curiosidad. Este proyecto representa un hito en nuestra búsqueda constante por innovar y ofrecer soluciones que transformen positivamente nuestro entorno.
Por el momento, deseamos mantener cierto misterio en torno a los detalles específicos del servicio que será presentado. Sin embargo, puedo asegurarle que su asistencia será recompensada con información privilegiada y la oportunidad de ser uno de los primeros en conocer esta emocionante propuesta.
En las próximas semanas, estaremos enviando más detalles sobre el lugar exacto y los horarios del evento. Mientras tanto, le animamos a reservar la fecha en su agenda para asegurar su participación en esta ocasión única.
Agradecemos de antemano su atención y esperamos contar con su presencia en este evento que promete ser una experiencia enriquecedora y reveladora.
Quedamos a su disposición para cualquier consulta adicional que pueda surgir.
Saludos cordiales,
[Tu Nombre] [Tu Cargo] [Nombre de tu Empresa]
Redacción de correos electrónicos con IA: nuestra conclusión
Para comenzar, diremos que en esta comparativa entre ChatGPT y Gemini conviene apartarse brevemente de la costumbre y dejar un espacio para el asombro. Con esto, decimos que si bien ahora parece natural que una máquina escriba con semejante destreza partiendo de unas pocas instrucciones, la eficiencia de los resultados no deja de ser maravillosa. El futuro está aquí.
Adentrándonos en el desempeño de los chatbots al redactar emails, aquí van nuestras conclusiones. Ambos cumplieron el pedido y los resultados no tienen fisuras importantes. En todo caso, la preferencia por uno u otro modelo dependerá de visiones subjetivas. Por mencionar un aspecto, se advierte en el correo de ChatGPT una mayor mecanicidad, por ejemplo en frases con adjetivaciones como “vibrante ciudad de Buenos Aires”.
Además, es interesante el modo en que tanto ChatGPT como Gemini añadieron detalles necesarios, que no fueron mencionados en el prompt. Por ejemplo, el pedido de confirmación de asistencia debido a los cupos limitados. Un detalle final: por alguna razón, el chatbot de Google decidió que nosotros —los usuarios— completemos los campos de día, fecha y hora, a pesar de que se indicó esa información en la instrucción.
ChatGPT vs. Gemini a la hora de traducir textos al español
Huelga decir que la traducción de textos es una tarea que los modelos de IA ya ejercían con soltura antes del despliegue de los nuevos modelos generativos. A fin de cuentas, se trata de una habilidad que requiere un menor grado de creatividad, esto en comparación con la redacción a partir de un prompt. Aún así, es jugoso revisar el desempeño de los sistemas que ofrecen Google y OpenAI.
Para esto, usamos los primeros párrafos de un artículo publicado en New York Post acerca de las actividades de Elon Musk en Tesla.
En este cruce ChatGPT vs. Gemini, el modelo de OpenAI arrojó la siguiente traducción:
Las acciones de Tesla se dispararon más del 11% el miércoles después de que el CEO Elon Musk dijera que la compañía aceleraría el lanzamiento de vehículos eléctricos más asequibles con la esperanza de impulsar los débiles beneficios.
El anuncio de Musk tenía como objetivo calmar a los inversores nerviosos en Wall Street que aún estaban tratando de digerir el informe de ganancias más reciente de la compañía, publicado el martes, que mostraba que las ganancias cayeron a su nivel más bajo en cualquier período de tres meses desde 2021.
Dan Ives, analista senior de Wedbush Securities, dijo que Tesla y Musk "enfrentan una tormenta de categoría 5”.
Por su parte, Gemini hizo el siguiente trabajo, con el mismo texto originalmente en inglés.
Las acciones de Tesla se dispararon más del 11% el miércoles después de que el director ejecutivo Elon Musk dijera que la compañía aceleraría el lanzamiento de vehículos eléctricos más asequibles con la esperanza de impulsar las ganancias caídas.
El anuncio de Musk tenía como objetivo calmar a los inversores nerviosos de Wall Street que aún estaban tratando de digerir el informe de ganancias más reciente de la compañía, publicado el martes, que mostraba que las ganancias cayeron a su nivel más bajo en cualquier período de tres meses desde 2021.
Dan Ives, analista senior de Wedbush Securities, dijo que Tesla y Musk "se enfrentan a una tormenta de categoría 5”.
El veredicto: ¿cuál de los modelos traduce mejor?
Respecto a esta prueba específica, si tuviésemos que escoger un traductor en la disyuntiva ChatGPT vs. Gemini, nos volcaríamos por el modelo de OpenAI. Si bien el texto empleado es breve, y hemos restringido este examen a un traslado de inglés a español, hay algunos puntos que conviene destacar. Son pequeñas variables que marcan la diferencia en favor de ChatGPT.
Sí, las traducciones son casi idénticas. Eso es esperable, a menos que los chatbots se vuelquen por diferentes acepciones de una misma palabra. La frase en la que “ganó” ChatGPT es la siguiente aquella que refiere al ánimo de Musk para impulsar a su automotriz. Gemini tradujo “… con la esperanza de impulsar las ganancias caídas”; mientras que el de OpenAI arrojó, con mayor claridad conceptual, “… con la esperanza de impulsar los débiles beneficios”.
Tenemos un veredicto en este ChatGPT vs. Gemini a la hora de traducir, pero, una vez más, estamos frente a subjetividades insoslayables. Con esto decimos que es posible que el de Google tenga un mejor desempeño con otros textos y que en este caso ha tenido mala suerte al toparse con un concepto que tradujo confusamente.
¿Qué modelo es mejor para resumir un texto?
Para cerrar esta comparativa ChatGPT vs. Gemini, echamos mano a un artículo de nuestro portal. En este caso, usaremos la noticia acerca de la aprobación en el Senado de Estados Unidos del proyecto de ley que prohibirá el uso de TikTok en aquel país, a menos que pase a manos de una compañía local.
Un detalle relevante: en lugar de copiar y pegar todo el texto del artículo en Hipertextual, solicitamos a los chatbots que lean el contenido de la URL.
El siguiente fue el resumen que arrojó Gemini. Se respeta el formato, negritas inclusive.
Resumen del artículo "Estados Unidos aprueba la ley que bloqueará TikTok si no se vende a otro dueño" de Hipertextual:
Ejes importantes:
El Senado de los Estados Unidos aprobó una ley que podría bloquear la aplicación TikTok en el país si no se vende a una empresa estadounidense antes del 27 de septiembre de 2024. La ley forma parte de una medida de gasto más amplia destinada a financiar las operaciones del gobierno federal hasta septiembre.
Las autoridades estadounidenses argumentan que TikTok representa una amenaza para la seguridad nacional debido a la posibilidad de que el gobierno chino acceda a los datos de los usuarios. TikTok ha negado estas acusaciones y ha dicho que sus datos están seguros.
La ley aún no ha sido aprobada por la Cámara de Representantes ni firmada por el presidente Joe Biden. Sin embargo, si se convierte en ley, podría tener un impacto significativo en la popular aplicación de redes sociales.
La medida ha sido criticada por algunos expertos en tecnología y seguridad, quienes argumentan que es una medida demasiado drástica y que podría dañar la libertad de expresión. Otros expertos han señalado que la ley podría ser un paso necesario para proteger la seguridad nacional de los Estados Unidos.
TikTok se encuentra en negociaciones con varias empresas estadounidenses, como Microsoft y Oracle, sobre una posible venta. Sin embargo, aún no se ha llegado a ningún acuerdo.En resumen, la ley aprobada por el Senado de los Estados Unidos podría bloquear la aplicación TikTok en el país si no se vende a una empresa estadounidense antes del 27 de septiembre de 2024. La medida ha sido criticada por algunos expertos, pero otros la consideran necesaria para proteger la seguridad nacional.
Este ha sido el resumen de ChatGPT vs. el de Gemini, notablemente más breve.
La noticia destaca que Estados Unidos ha aprobado una ley que permitirá bloquear TikTok si no se vende a un propietario diferente. La medida busca abordar preocupaciones de seguridad nacional relacionadas con la aplicación china. Esta acción refleja la continua tensión entre Estados Unidos y China en el ámbito tecnológico y de seguridad cibernética.
Conclusiones sobre dos resúmenes muy disímiles
No sabemos qué entiende Gemini de Google como un resumen, pero el suyo no lo es cabalmente. Hemos hecho el trabajo de contar las palabras. El artículo original tiene 683, mientras el “resumen” del chatbot de Google tiene 285. Una vez más, nos asalta la subjetividad. En este punto, es un hecho que algunas personas preferirán un resumen como el de Gemini, y no uno tan breve como el de ChatGPT.
Por lo demás, se valora en Gemini el uso de negritas, aunque es excesivo si el deseo es remarcar ejes relevantes. Un punto a favor del chatbot de Google es la adición de recursos para indagar más acerca de la misma noticia.
ChatGPT vs. Gemini: ¿quién asiste mejor al redactar correos, traducir y resumir?
A modo conclusivo, es preciso mencionar una serie de aspectos para determinar quién sale victorioso en el duelo ChatGPT vs. Gemini. Por un lado, es importante tener en cuenta que para aprovechar los beneficios de estos y otros chatbots, es fundamental la redacción adecuada de las intrucciones o prompts. En esta entrada de OpenAI hay varios consejos relevantes. Los básicos: escribir con claridad, brindar detalles y al mismo tiempo ser específicos, y referenciar textos.
Por otra parte, los usuarios de chatbots no deberían entregarse por completo a la automatización. Con esto, decimos que los resultados que arrojan deben ser revisados, analizados y editados con habilidad humana. Los ejemplos que hemos repasado en este artículo son muy claros al respecto. Tanto ChatGPT como Gemini hicieron un primer trabajo, que luego debe ser pulido.
Finalmente, insistimos en la subjetividad de estas conclusiones. Si bien los chatbots que analizamos han demostrado mayor o menos eficiencia en diversas tareas que hemos solicitado, sus resultados pueden variar dependiendo del contenido. También de las instrucciones que reciban. En resumen, es una buena noticia el hecho de poder usar ambos en sus versiones gratuitas, y testear cuál de los dos nos resulta más útil, según lo que necesitemos de ellos.
