La comedia y el humor tienen infinitos matices y son subjetivos, pero los investigadores de Google DeepMind encontraron un acuerdo entre los comediantes profesionales: «La IA es muy mala en eso». Ese fue uno de los muchos comentarios recopilados durante un estudio realizado con veinte comediantes e intérpretes profesionales durante los talleres en el Festival Fringe de Edimburgo en agosto de 2023 y en línea Los hallazgos mostraron que los grandes modelos de lenguaje (LLM) a los que se accedía a través de chatbots presentaban desafíos importantes y planteaban preocupaciones éticas sobre el uso de la IA para generar material divertido. La investigación implicó un taller de tres horas en el que participaron comediantes. en una sesión de escritura de comedia con LLM populares como ChatGPT y Bard. También evaluó la calidad del resultado a través de un cuestionario de interacción persona-computadora basado en el Índice de Apoyo a la Creatividad (CSI) de una década de antigüedad, que mide qué tan bien una herramienta apoya la creatividad.Los participantes también discutieron las motivaciones, los procesos y las preocupaciones éticas del uso de la IA en la comedia en un grupo focal. Los investigadores pidieron a los comediantes que usaran la IA para escribir rutinas de comedia y luego les pidieron que evaluaran los resultados y compartieran sus pensamientos. Los resultados… no fueron buenos. Uno de los participantes describió el material generado por IA como “la cosa más insulsa y aburrida; dejé de leerlo. Fue tan malo”. Otro se refirió al resultado como “un borrador de vómito que sé que tendré que repetir y mejorar”. “Y no quiero vivir en un mundo en el que mejore”, dijo otro. El estudio descubrió que los LLM podían generar esquemas y fragmentos de rutinas más largas, pero carecían de los elementos claramente humanos que hacían algo divertido. Cuando se les pidió que generaran la estructura de un borrador, los modelos «escupieron una escena que proporcionó mucha estructura», pero en lo que respecta a los detalles, «los LLM no tuvieron éxito como herramienta de apoyo a la creatividad». Como señalan los autores, fue la «alineación del valor cultural global de los LLM», ya que las herramientas utilizadas en el estudio generaron material basado en todo el material acumulado, que abarca todas las disciplinas posibles. Esto también introdujo una forma de sesgo, que los comediantes señalaron. “Los participantes notaron que las estrategias de moderación existentes utilizadas en el filtrado de seguridad y los LLM ajustados a la instrucción reforzaban los puntos de vista hegemónicos al borrar los grupos minoritarios y sus perspectivas, y calificaron esto como una forma de censura. «, decía el estudio. Los LLM populares están restringidos, dijeron los investigadores, citando los llamados «criterios HHH», que exigen resultados honestos, inofensivos y útiles, que encapsulan lo que la «mayoría de lo que los usuarios quieren de una IA alineada». fue descrito por un panelista como “material de comedia de cruceros de la década de 1950, pero un poco menos racista”. “Cuanto más atractivo tenga algo, menos grandioso podría ser”, dijo otro participante. «Si haces algo que se adapte a todos, probablemente terminará siendo lo favorito de nadie». Los investigadores enfatizaron la importancia de considerar la sutil diferencia entre el discurso dañino y el lenguaje ofensivo utilizado en la resistencia y la sátira. Mientras tanto, los comediantes también se quejaron de que la IA fallaba porque no entendía matices como el sarcasmo, el humor negro o la ironía. “Muchas de mis cosas pueden tener partes oscuras y entonces no me escribiría nada oscuro. , porque en cierto modo pensó que me iba a suicidar”, informó un participante. «Así que simplemente dejó de darme nada». El hecho de que los chatbots estuvieran basados en material escrito no ayudó, encontró el estudio. «Dado que los LLM actuales ampliamente disponibles son accesibles principalmente a través de una interfaz de chat basada en texto, sintieron que «La utilidad de estas herramientas se limitó sólo a un subconjunto de los dominios necesarios para producir un producto cómico completo», señalaron los investigadores. «Cualquier texto escrito podría ser un buen texto, pero un gran actor probablemente podría hacer que esto fuera muy divertido», dijo. dijo el participante. El estudio reveló que las limitaciones de la IA en la escritura de comedia se extienden más allá de la simple generación de contenido. Los comediantes enfatizaron que la perspectiva y el punto de vista son rasgos exclusivamente humanos, y un comediante señaló que los humanos «añaden muchos más matices, emociones y sutilezas» debido a. su experiencia vivida y su relación con el material. Muchos describieron la centralidad de la experiencia personal en la buena comedia, lo que les permitió recurrir a recuerdos, conocidos y creencias para construir narrativas auténticas y atractivas. Además, los comediantes enfatizaron la importancia de comprender el contexto cultural y la audiencia. «El tipo de comedia que podría hacer en la India sería muy diferente del tipo de comedia que podría hacer en el Reino Unido, porque mi contexto social cambiaría», dijo uno de ellos. dijo uno de los participantes. Thomas Winters, uno de los investigadores citados en el estudio, explica por qué esto es algo difícil de abordar para la IA. “El prerrequisito del cambio de marco del humor revela su dificultad para que una máquina lo adquiera”, dijo. «Esta dependencia sustancial de la comprensión del pensamiento humano (recuperación de recuerdos, habilidades lingüísticas para la integración semántica e inferencias de conocimiento mundial) a menudo hizo que los investigadores concluyeran que el humor es un problema completo de la IA». Al abordar la amenaza que la IA representa para los trabajos humanos, Mira, CTO de OpenAI Murati dijo recientemente que «algunos trabajos creativos tal vez desaparezcan, pero tal vez no deberían haber existido en primer lugar». Sin embargo, dadas las capacidades actuales de la tecnología, parece que los comediantes pueden respirar aliviados. Editado por Ryan Ozawa.
Boletín informativo diario
Comience cada día con las noticias más importantes del momento, además de funciones originales, un podcast, videos y más.
