Cómo detectar reseñas generadas por IA

Foto de Lisa Fotios.

La pregunta más habitual que me hacen es «¿Cómo es posible detectar un texto generado por IA?». Al fin y al cabo, ChatGPT es muy bueno. Y cuando la única señal que tienes son las palabras de la página, ¿cómo puedes siquiera empezar a adivinar la fuente? Bueno, como se suele decir, el estilo es el carácter.

Si dedicas suficiente tiempo a leer a Brandon Sanderson, podrás reconocer su estilo incluso si ves un fragmento fuera de contexto. Si dedicas suficiente tiempo a corregir los ensayos de los alumnos de secundaria, podrás distinguir a los de 7.º curso de los de 9.º. Y estamos de suerte, porque ChatGPT no solo es más distintivo que cualquiera de ellos, sino que además tenemos muchos más ejemplos con los que trabajar.

Empecemos con un ejemplo sencillo: aquí tenemos una reseña en Google Maps:

Pouch Camporee Field ocupa un lugar especial en el corazón de los scouts, y no tengo palabras suficientes para elogiar este fantástico lugar dedicado al escultismo. Es un auténtico paraíso para los scouts, y no podría estar más satisfecho con mi experiencia allí.

El camping en sí está excepcionalmente bien equipado, con amplio espacio para acampar, diversas áreas de actividades e instalaciones bien mantenidas. El hermoso entorno natural lo convierte en el lugar perfecto para que los scouts conecten con la naturaleza y aprendan habilidades esenciales para la vida al aire libre. El ambiente es tranquilo y fomenta un sentido de camaradería entre los scouts y los líderes.

Pouch Camporee Field ofrece una amplia gama de actividades y oportunidades para desarrollar habilidades. Ya sea orientación, pionerismo o talleres para obtener insignias de mérito, siempre hay algo interesante en lo que participar. Los programas están cuidadosamente organizados y los miembros del personal no solo están bien informados, sino que también están profundamente comprometidos con el movimiento scout.

El sentido de comunidad y tradición en Pouch Camporee Field es extraordinario. El espíritu del escultismo está muy vivo aquí, y es realmente inspirador ver a tantos jóvenes scouts reunirse para aprender, crecer y divertirse. La dedicación del personal y los voluntarios para garantizar una experiencia segura y memorable es muy loable.

La ubicación de Pouch Camporee Field es ideal, ya que ofrece un entorno tranquilo y apartado, pero a la vez es fácilmente accesible. Es un lugar excelente para que las tropas se reúnan, estrechen lazos y creen recuerdos imborrables.

En resumen, Pouch Camporee Field es un lugar donde los sueños scouts se hacen realidad. Con sus instalaciones bien equipadas, sus programas atractivos y un fuerte sentido de comunidad scout, es un tesoro para los scouts de todas las edades. Espero volver a este extraordinario destino scout y seguir creando recuerdos y desarrollando habilidades con mi tropa. ¡Palabra de scout!

¿Qué es lo primero que llama la atención de esta reseña? Es mucho más larga que una reseña normal y contiene muchos más adjetivos y adverbios que una reseña normal. Además, la mayoría de estos descriptores carecen de contenido, aparte de ser genéricamente positivos (fantástico, excepcional, hermoso, perfecto, reflexivo). He observado muchos clichés, como «no tengo palabras para expresar lo maravilloso que es» y «no podría estar más satisfecho».

Otra cosa a tener en cuenta es que a ChatGPT le gusta repetir la pregunta: fíjate en que el nombre completo del lugar aparece en la primera frase de la reseña. Mientras que una persona normal sabe que el lector ya conoce el contexto de la página en la que se encuentra, ChatGPT se asegura de que la respuesta responda completamente a la pregunta.

Una de las características más reveladoras de los textos generados por IA es su estructura muy rígida. Fíjate en que esta reseña tiene una introducción, un párrafo para cada aspecto de la reseña y una conclusión. Se trata de un patrón muy común que aparece constantemente, mientras que los humanos varían mucho más la estructura de sus párrafos y frases.

Ahora, intentemos aplicar estos conocimientos a un ámbito diferente. Las reseñas de ChatGPT están por todas partes en Amazon: echa un vistazo a algunos de los productos más vendidos y verás que sus secciones de reseñas están plagadas de IA.

Echemos un vistazo a dos reseñas del mismo producto en Amazon y puntuémoslas con la misma escala que antes.

Ejemplo 1: reseña de una botella de agua en Amazon.

¡Esta es mi botella de agua favorita del año! Lo que más me gusta de ella es la opción de beber a sorbos o de un trago.

Estoy muy satisfecho con la pajita incorporada, es muy fácil beber a través de ella. Y esto lo dice alguien que ha tenido varias botellas con pajitas incorporadas: esta botella Owalla es la mejor de 2023.

Otra gran opción es la posibilidad de beber directamente de la boca abierta. Una vez más, un diseño realmente inteligente, nunca tengo la sensación de que se me va a salpicar agua en la cara o en la nariz cuando bebo un trago grande.

El aislamiento es normalito. Cumple con su función de mantener mis bebidas frías. Este año hemos tenido un calor increíble aquí en California, así que he estado poniendo más hielo en mi agua. Y esta botella la mantiene fría toda la noche.

Hay algunos inconvenientes, no me gusta el peso. Es más pesada que otras botellas térmicas que he tenido. Además, hay que apretar con fuerza para cerrar el tapón. Creo que esto es algo en lo que Owala debería trabajar en su versión 2.0.

En general, estoy muy contento con esta botella. Ahora es la que uso a diario, en sustitución de mi Takeya. Me gusta tanto el diseño de la botella que he comprado la versión deportiva (más ligera). Podrían mejorar el diseño del tapón, y espero que lo hagan en el próximo modelo.

1. Largo - Sí
2. Descriptores vacíos: solo uno (de verdad)
3. Clichés: Ninguno.
4. Repite la indicación: No, solo «botella de agua».
5. Redacción muy estructurada: hay introducción, viñetas y conclusión, pero el párrafo de los contras es irregular y está un poco fuera de lugar.

En general, le daría una puntuación de 1,5/5 en esta escala. El mero hecho de que sea largo no es señal suficiente para afirmar que ha sido escrito por una IA. Es muy probable que haya sido escrito por un humano.

Ejemplo 2: reseña en Amazon de la misma botella de agua.

Hace poco compré la botella térmica Owala de 700 ml y se ha convertido rápidamente en mi aliada para mantenerme hidratada durante todo el día. Lo primero que me llamó la atención fue su diseño: elegante, moderno y disponible en una gran variedad de colores llamativos. La botella es resistente y ligera, perfecta para el uso diario.

En cuanto a funcionalidad, no defrauda. Es hermético y aislante, lo que significa que mis bebidas se mantienen frías durante horas, incluso en los días más calurosos. La pajita incorporada es una revolución para beber mientras te desplazas sin tener que desenroscar el tapón o inclinar la botella.

Lo que más aprecio es la atención al detalle. La pajita tiene una funda que la mantiene limpia, y la botella cabe en la mayoría de los portavasos de los coches y en los bolsillos laterales de las mochilas, lo que la hace increíblemente fácil de llevar de viaje. Además, el asa es perfecta para llevarla o engancharla a una bolsa.

La limpieza es muy fácil, lo que siempre es una preocupación con las botellas reutilizables. La boca ancha permite introducir un cepillo para botellas y los componentes de la pajita se desmontan para un lavado a fondo.

En resumen, la botella Owala es un producto cuidadosamente diseñado que cumple su promesa de comodidad y estilo. Es un compañero fiable para cualquiera que quiera aumentar su consumo de agua sin complicaciones. ¡Muy recomendable!

1. Largo - Sí
2. Descriptores vacíos: elegante, moderno, increíble, reflexivo.
3. Clichés: «lo primero que me llamó la atención», «revolucionario», «cumple lo que promete», «sin complicaciones».
4. Repite el mensaje: Sí, el nombre completo del producto «Botella térmica Owala de 24 onzas».
5. Redacción muy estructurada: sí, introducción, tres puntos clave y un resumen.

Parece que son 5 de 5 en indicios específicos de IA. Yo diría que es casi seguro que está escrito por IA.

¡Es fantástico ver que nuestro «modelo» interno se ha generalizado! Ninguno de estos puntos es una prueba irrefutable por sí solo, pero cuando todas las señales apuntan en la misma dirección, se pueden sumar y sacar tus propias conclusiones. ¡Cuéntame qué opinas! Puedes encontrarme en Twitter en @max_spero_ o enviarme un correo electrónico a max [at] pangram.com.