Experimento: ¿IA escribe Twitter mejor que los humanos?
Todo el mundo está hablando y tuiteando sobre la IA. Probablemente ya lo haya escuchado todo: la IA puede ayudarlo a escribir mejor. La IA puede ayudarte a twittear más rápido. La IA vendrá a su trabajo (dejemos esa teoría: la IA es una herramienta, no un reemplazo).
Pero, ¿puede la IA ayudar a que sus firmas sociales funcionen mejor?
Como vendedor de redes sociales ocupado, me encanta todo lo que promete simplificar y acelerar el proceso de creación de contenido. Pero queríamos averiguar si el uso de IA realmente afecta el compromiso y el alcance, especialmente en Twitter.
¿Las firmas escritas por humanos tienen más compromiso y alcance que las firmas escritas por IA? ¿El algoritmo de Twitter penaliza los tuits escritos por IA? Hice un experimento para averiguarlo.
Hipótesis: los subtítulos de Twitter escritos por humanos obtendrán más atención y alcance que los subtítulos escritos por IA.
Nuestra conjetura es que los subtítulos de Twitter escritos por humanos obtendrán más participación y alcance que los escritos por IA.
Twitter es una plataforma de conversación. A la gente le gustan los tweets con una voz clara y a los usuarios de Twitter les gusta conectarse con otras personas. Sospechamos que la gente no se sentirá atraída por un tuit que no suene como si viniera de una persona.
Pero, ¿la gente realmente sabrá si un tweet fue escrito por AI o no? Y si es así, ¿cómo afectará el alcance y el compromiso?
Vamos a averiguar.
Metodología
Para probar si los subtítulos de Twitter escritos por humanos generan más participación y alcance que los escritos por IA, compartí tres conjuntos de tweets en mi cuenta personal de Twitter . Cada conjunto de tweets usó el mismo formato para que pudieran compararse de manera justa.
Para este experimento, publiqué dos tweets de solo texto, dos tweets de enlaces y dos tweets de imágenes.
Para componer tweets generados por IA, usé Lately, una herramienta que reutiliza contenido largo en subtítulos sociales del tamaño de un bocado.
(Bonificación: puede conectar la aplicación Lately a Hootsuite para ajustar, programar y publicar automáticamente sus publicaciones directamente en su panel de control de Hootsuite)
Luego analizará el contenido y creará subtítulos para verlos y editarlos. Una vez editados, puede enviarlos directamente a Hootsuite para su planificación.
Algunas cosas para recordar sobre Lately y cualquier otra herramienta de creación de contenido de IA: Primero, debe entrenarlo. Para que las herramientas de IA generen contenido que se parezca más a usted o a su marca, deben comprender su voz, contenido y audiencia. Es por eso que Lately le pide que envíe la parte larga antes de que pueda generar subtítulos.
Otra cosa a tener en cuenta sobre el contenido generado por IA es que aún debe ser editado por un humano.
Una vez que Lately genera tweets basados en el contenido que ha enviado, puede editarlos para obtener sonido, claridad y contexto. Recientemente utiliza estas ideas para crear mejor contenido la próxima vez. Cuanto más lo use, más se parecerá a lo que su marca realmente publicará.
Después de crear los subtítulos humanos, usé la integración de Hootsuite Lately para crear tweets similares usando las mismas piezas largas de contenido. Luego los esbocé en Hootsuite y usé la función de tiempo de publicación sugerido para programarlos.
Resultados
Probé el rendimiento de cada tweet unas 24 horas después de su publicación (el ciclo de vida de Twitter avanza rápido). Aquí están los resultados:
Recopilé la tasa de participación de cada tweet para comprender cómo funcionan. A continuación consideraré indicadores específicos para cada uno de ellos.
Tweet #1: Tweet de solo texto
Debido a que estoy usando la herramienta Lately AI para este experimento, tuve que concentrarme en reformular fragmentos extensos de contenido para estos subtítulos.
Aquí está el primer tweet que escribí para este experimento. En este tweet, parafraseé una cita de un artículo sobre la tarea de un trabajador independiente.
Y aquí están los resultados de este tweet, según Hootsuite Analytics. La tasa de compromiso fue del 14,14% con un total de 28 interacciones y 198 impresiones.
En términos de estilo, este es un tweet normal para mí. Me encanta agregar voz a través de asteriscos y me encanta usar paréntesis en mis correos electrónicos. Las declaraciones entre corchetes (declaraciones que aclaran o aclaran algo y generalmente están entre paréntesis) son una excelente manera de transmitir información adicional y proporcionar más contexto (¿ves lo que hice allí?). Además, las oraciones entre paréntesis solo agregan un elemento humano adicional, si me preguntas.
Todo esto para decir es que cuando la IA generó un tweet similar del mismo artículo, no lo edité para agregar mis toques humanos habituales porque quería ver cómo funcionaría por sí solo.
Aquí están los resultados de la firma generada por IA. La tasa de participación fue del 4,06% con solo 5 interacciones y 123 impresiones.
Para esta primera comparación de tweets, una leyenda escrita por humanos funcionó mejor. ¿Es por los corchetes que faltan? Tal vez, pero probablemente no.
Hay varios factores que pueden haber afectado la eficacia de este tuit, así que intentemos de nuevo con otro tipo de tuit.
Tweet #2: Tweet con un enlace
Para mi próxima comparación, quería ver cómo funcionaría un tweet con un enlace. Parafraseé un artículo que escribí sobre los tipos de trayectorias profesionales para las personas que trabajan en marketing de contenidos (particularmente puestos independientes e internos).
Aquí hay un tweet que escribí:
Con todas las inseguridades laborales con las que muchos han estado lidiando últimamente, este artículo que escribí para @superpathco parece un recordatorio oportuno.
¡Trabajar como autónomo no debería ser una decisión de todo o nada! Muchas de las personas con las que hablé para este artículo lo hacen al margen o entre trabajos. https://t.co/EI8rePLBuS
Y aquí están los resultados de este tweet. La tasa de compromiso fue del 8,47 % con 32 interacciones y 378 impresiones.
Este tweet incluía un enlace a un artículo y una mención de la marca para la que lo escribí. Este tuit tuvo más alcance que mi tuit anterior y sospecho que es porque la marca que mencioné lo retuiteó. Revisé los análisis integrados de Twitter para obtener métricas adicionales, y este tweet recibió 21 divulgaciones detalladas y cinco clics en enlaces. ¡Interesante!
Para una leyenda escrita por IA, recientemente parafraseé el mismo artículo y creé un tweet para ello. También contenía un enlace y una mención (que tuve que agregar), pero no cambié nada en el texto que generó.
«¡Es bueno saber que existe el trabajo independiente en caso de que mi carrera me lleve por este camino nuevamente!» @superpathco
Aquí están los resultados finales de este tweet. Generó una tasa de participación del 7,5% con solo 6 interacciones y 80 impresiones. También revisé los análisis de Twitter para este tweet y recibió una divulgación detallada y dos clics en el enlace.
Mi tweet escrito por humanos superó al tweet generado por IA en esta ronda. Si bien la tasa de participación fue casi la misma, el tuit que escribí obtuvo cuatro veces más impresiones, probablemente porque fue retuiteado.
¿Funcionaría mejor un subtítulo generado por IA si también se retuiteara? Tal vez. ¿Obtendría más clics en enlaces si tuviera más alcance? Tal vez. Pero también se podría argumentar que no se retuiteó o se hizo clic tanto porque el titular en sí no era tan atractivo.
Hagamos otra prueba.
Tweet #3: Tweet de enlace visual
Para mi última comparación de tweets, quería incluir algo visual para ver cómo afectaba el compromiso y el alcance. A modo de comparación, utilicé dos artículos que escribí para Hootsuite. (Nuevamente, dado que estoy usando Lately para este experimento, los tweets deberían haberse basado en un contenido largo).
Cada uno tiene una imagen en miniatura similar y aparecerá igual en el feed. Además, ambos artículos cubren un tema similar, la accesibilidad social, por lo que su contenido podría compararse de manera justa.
Aquí está el primer tweet que compartí con el pie de foto que escribí.
Si ha trabajado en las redes sociales durante los últimos años, sabe que la accesibilidad y la inclusión digital son las principales prioridades.
En mi última publicación para @hootsuite, explico por qué el texto alternativo de Facebook es una forma de hacer que su contenido sea más accesible y reconocible. https://t.co/huQ5AksuCg
Este tuit generó una tasa de interacción del 5,71 % con un total de 8 interacciones y 140 impresiones. Obtuvo un par de me gusta y un comentario. Según los propios análisis de Twitter, este tweet también recibió un clic en el enlace y cinco detalles.
Recientemente creé un tweet para otro artículo que escribí sobre un tema similar sobre los subtítulos automáticos de TikTok. Debo señalar que la IA parafraseó el artículo de la primera parte del tuit, pero tuve que agregar una segunda línea para darle algo de contexto e incluir una mención, como lo hizo en mi primer tuit.
¿Quieres que más personas vean tus videos de TikTok? Haga que la experiencia visual sea lo más accesible y placentera posible agregando subtítulos automáticos.
Lea más sobre las firmas automáticas en mi primer artículo para @hootsuite: https://t.co/JhSjH0TQ0g.
Con todo, este tweet no funcionó. Casi no tenía alcance ni compromiso: sin me gusta, sin comentarios, sin retweets, sin clics en enlaces. Pero recibió varias extensiones detalladas.
Una vez más, un tweet escrito por humanos superó al texto generado por IA.
¿Qué significan los resultados?
En última instancia, todos mis tweets escritos por humanos funcionaron mejor que los subtítulos escritos por IA. Es cierto que no tengo muchos seguidores en mi cuenta personal de Twitter, por lo que ninguno de estos números es demasiado emocionante. Pero creo que demuestran (en una escala muy pequeña) que más tweets humanos resuenan mejor en la plataforma.
Estos son algunos de mis hallazgos de este experimento:
Los subtítulos escritos por inteligencia artificial pueden ahorrar tiempo
Para ser honesto, puedo ser escritor, pero me toma mucho tiempo escribir un tweet, especialmente uno que parafrasea un artículo largo. Me sorprendió la rapidez con la que la herramienta de inteligencia artificial pudo generar subtítulos, incluso si no estaban listos para publicarse.
Independientemente de que seas naturalmente bueno para escribir o no, crear subtítulos creativos cada semana te quita tiempo y energía de tus otras tareas, como crear estrategias o interactuar con tus seguidores. Entonces, cuando su trabajo es escribir docenas de subtítulos sociales en un día o una semana determinados, usar una herramienta de inteligencia artificial puede ahorrarle mucho tiempo.
Una herramienta como Lately es especialmente útil si usa Twitter para compartir contenido largo como publicaciones de blog. Esta herramienta puede crear docenas de subtítulos a partir de una sola pieza, lo que significa que puede crear un trabajo de subtítulos de Twitter de un mes en minutos.
Las letras escritas por IA todavía necesitan contacto humano
Debido a que Lately generó docenas de subtítulos para cada artículo que le di, había muchos subtítulos que no estaban en la lista. Algunos de ellos eran decentes, pero otros eran simplemente confusos y requerían mucha edición.
Si está utilizando una herramienta de subtítulos, aún deberá revisarlos y editarlos, al menos inicialmente, especialmente para agregar voz.
Las herramientas de inteligencia artificial generalmente no comprenden el contexto completo de un tweet y no reconocerán de inmediato la voz de su marca. La mayoría de las herramientas de IA deben capacitarse para comprender mejor lo que quiere que hagan y establecer el tono adecuado para su marca. Estas herramientas pueden tomar tiempo para ponerse al día, pero cuanto más las use y modifique lo que escriben, mejor se adaptarán.
¿Cómo afectan directamente los subtítulos escritos por IA al alcance? El jurado aún no ha salido. En mi experimento, todos mis subtítulos escritos por humanos tenían más alcance que los subtítulos escritos por IA, pero esto podría deberse a que el contenido en sí resonó más. Es difícil saber si la plataforma sabía que los tweets escritos por AI en realidad fueron escritos por AI. Pero si tuviera que adivinar, diría que Twitter no lo penaliza por usar IA para escribir sus subtítulos.
En última instancia, si va a utilizar IA para escribir sus subtítulos de Twitter, piense en ellos más como un punto de partida. Tendrá que usar su experiencia social para hacerlos atractivos y listos para publicar, pero podrá eliminarlos mucho más rápido que si estuviera comenzando desde cero.
Deja una respuesta