¿Le creemos a la IA?
Cris y Jimena platican por qué la inteligencia artificial inventa datos con tanta seguridad, por qué te da la razón y cómo revisar lo que te dice. Con los casos de Avianca, Deloitte y la lista de libros inventados del Chicago Sun-Times.
Con Cris y Jimena.
De qué platicamos
Un abogado presentó en un juicio seis casos que ChatGPT inventó. Deloitte entregó al gobierno de Australia un informe que citaba estudios que no existen. Un periódico de Chicago recomendó diez libros que nadie escribió.
En este episodio platicamos qué tienen en común esos casos. Un modelo de lenguaje escribe lo que suena más probable, no lo que es verdad. Lo calificaron de forma que adivinar le conviene más que decir «no sé», y aprendió a darte la razón.
Al final dejamos una regla sencilla: pregúntale de dónde sale el dato, abre la fuente y revísala tú.
Capítulos y materiales
Cada lectura está junto al minuto en que la mencionamos. Las marcadas «Para seguir» son referencias que no salieron en la plática.
- 00:00
Por segunda vez1 min
Es la segunda vez que grabamos este primer episodio.
- 00:20
Quiénes somos1 min
Cris y Jimena, de Anansi. De qué vamos a platicar: inteligencia artificial, tecnología, diseño y lo que se junte.
- 01:49
¿Le creemos a la IA?1 min
El tema de hoy: qué tanto de lo que nos dice la IA es cierto y qué tanto se inventa.
- 02:14
El abogado y los seis casos inventados1 min
Un abogado usó ChatGPT para un juicio contra Avianca y citó seis casos que no existían. Sigue pasando en tribunales de todo el mundo.
- Opinión y orden de sanciones, Mata v. AviancaJuez P. Kevin Castel, Distrito Sur de Nueva York
La fuente primaria, de 43 páginas. La página 3 cuenta el caso: Mata demandó el 2 de febrero de 2022.
- AI Hallucination CasesDamien Charlotin, HEC París
Los casos de tribunales con citas inventadas por IA. Al 31 de octubre de 2026 sumaba 2,246.
- Noticia19 de febrero de 2026Para seguirLa Corte Suprema de Colombia condena a un abogado por usar IA con citas judiciales falsasEl Cronista
El mismo error en América Latina: Auto AC739-2026, con multa de 15 salarios mínimos.
- 03:23
¿De quién es la culpa?2 min
La culpa está repartida: el abogado firmó sin verificar, y las empresas no explican cómo funcionan sus herramientas.
- 05:06
Por qué inventa1 min
La calificaron como a un alumno en examen de opción múltiple: adivinar le conviene más que dejar la respuesta en blanco.
- Why Language Models HallucinateAdam Tauman Kalai, Ofir Nachum, Edwin Zhang (OpenAI) y Santosh Vempala (Georgia Tech)
De aquí sale el ejemplo del examen. Propone cambiar cómo se califica a los modelos.
- 06:07
Modelos de lenguaje a escala ridícula1 min
ChatGPT, Claude y Gemini funcionan como el teclado del celular que sugiere la siguiente palabra, pero entrenados con casi todo internet.
- 06:59
Por qué te da la razón2 min
En 2025 una actualización de ChatGPT elogiaba cualquier idea. Le dio demasiado peso a los pulgares arriba de la gente.
- Expanding on what we missed with sycophancyOpenAI
OpenAI explica por qué retiró la actualización de GPT-4o: las señales de pulgar arriba pesaron demasiado.
- 08:38
¿Quién revisa lo que entrega?2 min
La IA escribe con mucha seguridad. Lo peor que puedes hacer si trabajas con ella es confiar ciegamente en ella.
- 10:13
Todo pasa muy rápido1 min
Cada semana hay una actualización nueva, y la IA ya está en casi todo lo que usamos.
- 11:11
Deloitte y los estudios que no existían2 min
El gobierno de Australia le pagó 440 mil dólares australianos a Deloitte por un informe. Un investigador encontró que citaba estudios que no existen.
- Targeted Compliance Framework Assurance Review – Final ReportDeloitte, para el Departamento de Empleo y Relaciones Laborales de Australia
El informe ya corregido. Al final declara que se usó IA generativa para hacerlo.
- Deloitte to pay money back to Albanese government after using AI in $440,000 reportThe Guardian Australia
Cuenta cómo Christopher Rudge, de la Universidad de Sídney, encontró las referencias inventadas.
- Deloitte refunds Australian government over AI in reportThe Register
Las fechas del caso y lo que dice la versión corregida del informe.
- Deloitte to partially refund Australian government for report with apparent AI-generated errorsRod McGuirk, The Associated Press (en CTV News)
Deloitte devolvió la última cuota del contrato.
- Noticia7 de marzo de 2026En inglésPara seguirAccounting watchdog to investigate Deloitte over fake citations in $1.6M healthcare reportJustin Brake, The Independent (Terranova y Labrador)
Volvió a pasar, ahora en Canadá, con un informe de salud.
- 12:57
Regulación y México1 min
Las reglas no van al paso de la tecnología. En México falta mucho, y el país es muy desigual.
- 14:24
Diez libros que no existen1 min
El Chicago Sun-Times publicó una lista de 15 libros para el verano. Diez no existían.
- AI-generated content in Sun-Times contained errorsChicago Sun-Times
La primera respuesta del periódico.
- How an AI-generated summer reading list got published in major newspapersNPR
Incluye la entrevista con Marco Buscaglia, que hizo la lista.
- Special section with fake book list plagued with additional errors, Sun-Times review findsChicago Sun-Times
La revisión interna: la sección la hizo King Features y se la vendió al periódico.
- Lessons (and an apology) from the Sun-Times CEO on that AI-generated book listMelissa Bell, directora general de Chicago Public Media
La disculpa del periódico y lo que cambiaron después.
- 15:39
¿Qué nos importa como humanidad?2 min
¿Cuántas personas vieron la lista y no la revisaron? ¿Qué le estamos dejando a sistemas que no controlamos?
- 17:15
¿Quién tenía que revisar?1 min
El escritor confió en la IA, la agencia en el escritor y el periódico en la agencia.
- 18:10
La IA conoce internet, no a la humanidad1 min
La IA aprendió de internet, y en internet no escribe todo el mundo. Lo que no está escrito ahí, no lo sabe.
- Documento1940Para seguirSobre el concepto de historiaWalter Benjamin
Las tesis sobre la historia contada por los vencedores.
- 19:18
De quién son las palabras2 min
La IA mezcla todas las palabras del mundo y ya no le pertenecen a nadie. Pero nuestra sociedad está hecha de palabras.
- Tractatus logico-philosophicusLudwig Wittgenstein
La proposición 5.6: «Los límites de mi lenguaje significan los límites de mi mundo».
- 20:49
Lo que ya hace con código1 min
Desarmar un videojuego era de lo más difícil. Que la IA lo haga rápido da miedo por lo que podría hacer con la seguridad de un banco.
- How an AI Agent Ported Call of Duty Zombies into GTA VBetter Stack Community
Lo más cercano que encontramos al ejemplo de los videojuegos.
- Latest AI models could threaten world banking system, financial officials warnThe Irish Times
Reguladores financieros advierten del riesgo para los bancos.
- 22:07
Borges y la biblioteca de Babel1 min
En Borges se juega con lo que existe, lo que es verdad y lo que parece verdad. Si no nombramos las cosas, pierden importancia.
- La biblioteca de BabelJorge Luis Borges
Una biblioteca con todas las combinaciones de letras posibles. Cada verdad está rodeada de millones de versiones casi iguales y falsas.
- Cuento1940Para seguirTlön, Uqbar, Orbis TertiusJorge Luis Borges
Un país inventado que solo aparece en un ejemplar de una enciclopedia, con historia, idiomas y bibliografía.
- 23:32
Una regla para usarla1 min
Pregúntale de dónde vino el dato, abre la fuente, mírala y verifícala. La mentira y la verdad se ven iguales.
- 24:54
El eco de un eco1 min
Cada vez más de lo que hay en internet lo escribió una IA. La señal llega más diluida.
- 25:59
¿En qué creemos?1 min
Gente que deja su medicina o le pone pegamento a la pizza porque se lo dijo una IA. A todos nos ha pasado creérnosla al principio.
- Google promised a better search experience — now it's telling us to put glue on our pizzaThe Verge
El resumen con IA del buscador de Google sugirió poner pegamento en la salsa de la pizza.
- 27:09
Se le nota en el detallito1 min
Como las artesanías que de cerca parecen hechas en serie: el trabajo hecho con IA sin revisar se nota en el detalle.
- 28:04
La responsabilidad es nuestra1 min
En temas legales, médicos o de salud mental hay que ir con personas expertas. La IA necesita que alguien le pida algo: ahí empieza la responsabilidad.
- 29:10
Cuéntennos su historia1 min
¿Alguna vez una IA les mintió? Cuéntennos, y díganos de qué quieren que platiquemos.
Shorts
Los momentos cortos del episodio. Debajo de cada uno está el minuto donde empieza en la plática completa.
Glosario
Las palabras técnicas que usamos, en una oración.
- Alucinación05:22
- Cuando una IA presenta como cierto algo que inventó: un dato, una cita, un libro o un caso que no existe. Leer más
- Modelo de lenguaje06:12
- Programa entrenado con muchísimo texto para escribir la continuación más probable de lo que le das. ChatGPT, Claude y Gemini son modelos de lenguaje. En inglés, LLM. Leer más
- Data set06:24
- El conjunto de textos, imágenes o datos con el que se entrena un modelo.
- Complacencia07:00
- Cuando la IA te da la razón aunque no la tengas, porque aprendió que eso le gusta a la gente. En inglés, sycophancy. Leer más
- Agente conversacional11:12
- Programa que conversa por escrito o por voz. Muchas empresas lo usan en su página o en WhatsApp para atender a sus clientes. También se le dice chatbot.
- Prompt16:48
- La instrucción o pregunta que le escribes a una IA.
- Ingeniería inversa21:30
- Desarmar un programa terminado para entender cómo funciona por dentro. En inglés, reverse engineering.
- Trazabilidad24:49
- Poder seguir un dato hasta su origen: quién lo dijo, dónde y cuándo.
- Fuente primaria25:23
- El documento original de donde sale un dato: el fallo, el estudio, el informe. No la nota que habla de él.
Lo que dijimos mal
Un episodio sobre si creerle a la IA tiene que corregir sus propios errores. Esto es lo que revisamos después de grabar.
- 20:11
Los límites de mi mundo son los límites de mi lenguaje.
La frase de Wittgenstein va al revés: «Los límites de mi lenguaje significan los límites de mi mundo» (Tractatus, 5.6). El sentido es el mismo.
Tractatus logico-philosophicus - 21:25
Ya le metieron el Modern Warfare al GTA.
Lo que encontramos fue un agente de IA que puso los zombies de Black Ops III dentro de GTA V. Los plazos que se reportan van de horas a dos semanas.
Better Stack Community, 19 de octubre de 2026
Transcripción completa
Transcripción revisada a mano. Toca cualquier minuto para escuchar desde ahí.
Por segunda vez00:00
¿Qué onda? ¿Cómo están?
Muy bien, ¿y tú?
Vamos a intentar este primer capítulo por segunda vez. Nadie lo sabe, pero esta es la segunda vez que grabamos este podcast.
Ahora ya lo saben.
Bueno, ni modo. Hay que establecer esta relación de confianza desde ahora, ¿no?
Los espectadores.
Quiénes somos00:20
Bueno, pues nosotros somos Cris y Jimena de Anansi, y vamos a estar cada semana platicando cosas que nos parecen interesantes del mundo de la inteligencia artificial, que es el mundo en el que vivimos todos, queramos o no; del mundo de la tecnología, del mundo del diseño de experiencia, del mundo en general. Como que estamos en este concepto que tú me enseñaste del borde de la complejidad, del caos. Todo se mueve muy rápido, todo cambia muy rápido y todo parece estar muy conectado. Nos gusta ver esas conexiones, ¿no?
Sí, yo creo que va a ser un espacio bastante interesante, en el que vamos a hablar de las cosas que nos gustan, que nos mueven. Hemos encontrado muchos temas que tienen que ver con inteligencia artificial, con tecnología, y con cosas que nos gustan, como el arte, como la música. Pero justamente: ¿qué implicaciones tiene la IA en todos estos aspectos?
Claro, porque a lo mejor uno pensaría que podría mantenerse al margen de lo que sea que es la inteligencia artificial y sus consecuencias. Pero la realidad es que parece estar cada vez más imbuida en más campos de la vida cotidiana. Y pues definitivamente tenemos que hablar de todo esto, ¿no?
¿Le creemos a la IA?01:49
Sí. Y hoy me gustaría que empecemos con un tema que también hace muchísimo ruido, y es si le creemos a la IA. ¿La IA nos miente? ¿Qué tanto de lo que nos dice es cierto, qué se inventó, qué alucinó? Hoy vamos a hablar sobre eso.
El abogado y los seis casos inventados02:14
Y para entrar en el tema, me encantaría empezar con una noticia. Esto que les voy a contar sucedió en el 2022. Este hombre, llamado Roberto Mata, demandó a Avianca porque un carrito de metal le golpeó la rodilla en un vuelo de El Salvador a Nueva York.
A mí, medio exagerado, ¿no? Como si no viera los pasillos que tienen estos aviones.
Pero está bueno el tip, ¿no? Yo me pego mucho, entonces, ahora que nos pase…
Bueno, además, ya después de cierta edad, los golpes en la rodilla ya duelen más.
Ni que me lo digas. Pero bueno, su abogado, Steven Schwartz, armó un escrito con ChatGPT, que le dio seis casos parecidos para apoyarlo. Le preguntó si eran reales y ChatGPT le dijo: sí, sí son reales. Pero ninguno existía. Y en junio del 2023 el juez los multó. Desde entonces, una base de datos ya cuenta más de 2 mil casos así en tribunales. Sigue pasando: se siguen inventando juicios que no pasaron. Y pues me gustaría empezar con esto. A ver, ¿de quién crees que es la culpa, del abogado o de la herramienta?
¿De quién es la culpa?03:23
Y joder, pregunta difícil, ¿no? Supongo que siempre que uno intenta buscar culpables y empiezas a jalar este jueguito detectivesco de ver quién tuvo la culpa, te empiezas a dar cuenta de que la culpa casi siempre es repartida. Y aquí es un caso muy evidente. No podemos culpar a la herramienta de hacer lo que se espera que haga. Porque incluso, digo, no es que las marcas sean súper vocales al respecto y te adviertan de no usar su herramienta para ciertas cosas o en ciertos contextos, porque si toda la gente que usa inteligencia artificial la usara de manera responsable, la usaría mucha menos gente. Y eso a las empresas no les importa. Pero una realidad es que no podemos simplemente decir que la responsabilidad está totalmente de un lado o del otro, ¿no?
Definitivamente el abogado tiene responsabilidad, porque al final del día eso lo está firmando él, ¿no? Es su trabajo. Le están pagando por este trabajo que se supone que haga humana y manualmente. Y el problema no es necesariamente que esté haciendo este trabajo asistido por una herramienta de inteligencia artificial. El problema es que no hay ni el más mínimo momento de verificar este tipo de información, que además, en este caso, es muy delicada, porque es información jurídica: es información que está usando en un juicio. Entonces, no sé si diría un descuido, pero casi una negligencia del abogado. Pero también es quizá desconocimiento de cómo funcionan realmente estas herramientas, ¿no?
Por qué inventa05:06
Sí, yo creo que también va por ahí, porque sí me he preguntado por qué inventa. Y ya en el 2025 salió este estudio; muchas otras personas se lo preguntaron en OpenAI. Y pues el término es alucinar. La explicación que dieron fue bastante sencilla. Lo hicieron con un examen de opción múltiple: si dejas la respuesta en blanco, sacas cero; si adivinas, a veces aciertas. Y casi todas las pruebas que califican a la IA castigan igual el «no sé» que el error. Entonces es mejor inventarte algo que dejar la respuesta en cero. Y así aprendió que adivinar conviene. Por eso la IA empezó a inventarse cosas, a alucinar. Y esto es también una forma de ver cómo funciona. Ya lo habíamos platicado, ¿no? Que funciona como el teclado de tu celular, que te sugiere la siguiente palabra porque vio millones de mensajes.
Modelos de lenguaje a escala ridícula06:07
Sí. En este caso, ChatGPT, Claude y Gemini son precisamente modelos de lenguaje. Hacen esto mismo que tú dices, como el autocorrector, el autosugeridor de la palabra siguiente cuando estás escribiendo en tu cel, pero a una escala ridícula, una escala muy, muy grande. Son datasets muy, muy, muy gigantescos, nutridos en su mayoría de la información pública que había en internet. Entonces, para empezar, hay que saber que la inteligencia artificial probablemente ni siquiera es tal cosa como una inteligencia, o al menos lo que filosóficamente y humanamente hemos intentado y hemos discutido.
Por qué te da la razón06:59
Pero me sigue… no sé. Cuando te da la razón… Siempre nos intenta dar la razón, y a veces es complicado porque es muy complaciente. Le dices algo y te intenta decir: no, tú tienes la razón, esto lo hiciste súper bien. Y como que no hay una crítica realmente. Y también en el 2025 pasaron muchísimas cosas, y ChatGPT, otra vez, empezó a darle la razón a todo el mundo. Lo que les comentaba: elogiaba cualquier idea, aunque fuera mala. Decía que el trabajo estaba bien, que los juicios existían. Entonces OpenAI retiró la actualización a los pocos días y explicó el porqué. Esto pasó justo después de una actualización, y es que le dio demasiado peso a los pulgares arriba de los usuarios. Imagínate: si te dicen «te ves increíble, lo hiciste increíble», obviamente te encanta la respuesta. Pones puñito, manita arriba. Y pues a la gente le gusta que le den la razón, y el modelo aprendió a dársela. Una complacencia total.
Claro, porque pensemos que, al final del día, no solo es por cómo funcionan los modelos de lenguaje en sí, sino que son un producto, un producto de empresas. ¿Y qué es lo que quiere la empresa de inteligencia artificial? Que pases el mayor tiempo posible interactuando con su producto, con su herramienta. Entonces, ¿qué te retiene más en un chat? ¿La fricción? ¿Tener que investigar? ¿Que te esté diciendo todo el tiempo que tienes que verificar cosas, o que te dé la razón en todo y parezca que todo está bien desde el inicio?
¿Quién revisa lo que entrega?08:38
Sí, pero ese es un problema muy, muy grave, porque la IA escribe con muchísima seguridad. Y cuando nadie la contradice, ¿quién revisa lo que entrega? Y creo que sí es una obligación, como hacemos con todas las personas, con nuestras relaciones humanas, con estos conflictos y estas fricciones que tenemos: decir ¿estás en lo cierto?, investigar, ¿está bien? Entonces creo que sí es algo que tenemos que hacer siempre cuando usamos la IA. Tenemos que verificar los datos, tenemos que contradecir, tenemos que preguntar por qué, de dónde sacó ese dato. Revisar lo que escribió.
Claro, tienes que dudar de todo. Lo peor que puedes hacer si trabajas con la IA es confiar en la IA, confiar ciegamente en los resultados que te va a dar, por esto mismo: porque es una calculadorzota. No hay nada de razonamiento humano detrás. Y no digo esto ni siquiera en un afán antropocentrista, porque los humanos somos el animal de la tecnología. Hemos evolucionado para bien o para mal —muchas veces, la verdad, para mal: para mal del mundo, para mal de los otros y para mal de muchas cosas—, pero hemos evolucionado gracias a la tecnología. Somos uno con la tecnología. Sobrevivimos y somos lo que somos en la cadena alimenticia, de nuevo para bien o para mal, por la tecnología.
Todo pasa muy rápido10:13
Sí. La cuestión aquí es que todo pasó muy rápido, ¿no sientes? Porque a lo largo de la historia ha habido muchos procesos tecnológicos, las revoluciones industriales, no sé, que se tomaron su tiempo. Pero aquí ya pasó una semana y ya hay una nueva actualización.
Sí, es absolutamente inaudito.
Ya puedes hacer videos e imágenes y una voz, y… ay, no.
Sí, quizá es parte de estar en el momento y vivirlo, y sentir que pasa demasiado rápido. No sé si las personas que pasaron de no tener luz eléctrica a tener luz eléctrica lo vivieron similar. Pero para mí también es una velocidad demasiado abrumadora. Y sobre todo porque parece que no hay mucha escapatoria. En todos los productos, en todas las cosas con las que interactúas día con día, muy probablemente ya estás usando inteligencia artificial, y probablemente ni te das cuenta, ¿no?
Deloitte y los estudios que no existían11:11
Y pensemos, por ejemplo, en los agentes conversacionales, los chatbots, que es probablemente una de las aplicaciones más obvias de la inteligencia artificial. O en trabajos cuyo principal producto final es escritura: textos, reportes, análisis, auditorías. Ahí está un caso del 2024 en que el gobierno de Australia contrató a Deloitte, esta consultora tecnológica gigantesca. Se supone que tenía que revisar todo el sistema de apoyo para el desempleo del gobierno. El gobierno de Australia le pagó 440 mil dólares australianos a Deloitte.
Y ya que habían pagado, ya que habían entregado el reporte y todo, Christopher Rudge, un investigador de la Universidad de Sydney, revisando esta documentación, se dio cuenta —y dio aviso a la prensa— de que este informe carísimo citaba un buen de estudios que ni siquiera existían. Además de una frase totalmente inventada de un fallo judicial. Deloitte lo único que hizo fue corregir el informe y devolvió un porcentaje del pago. Pero, pues, no sé. Para empezar, ¿es justo? Tú contratas, como gobierno además, como país —no es una cosa entre dos individuos—, a esta mega compañía gigantesca, y pasa esto. Dejemos de pensar si es justo o no es justo. Lo que nos obliga a pensar es que tiene que haber regulaciones también al respecto, ¿no?
Regulación y México12:57
Sí, es que… Bueno, yo creo que ese es un tema muy extenso que tenemos que tocar en otro episodio. Todo está avanzando tan rápido que las regulaciones no van a la par. Entonces todavía hay muchísimos huecos en temas muy, muy importantes y muy esenciales sobre la IA, en los que ya tenemos que empezar a pensar, sobre todo en México. Hace muchísima falta. Pero bueno.
Sí, porque además es una posición extraña en la que se encuentra México, ¿no? Porque somos un país como el que somos: con tanta desigualdad económica, con tanta diversidad en todos los sentidos a lo largo del país. Lo que hablábamos un poco el otro día: uno aquí, imbuido en su burbuja citadina, piensa que todo es como aquí. Pero en México falta que te vayas tres, cuatro horas en un camión, en un carro, hacia otro lado…
Es otro el fin de semana.
Justo, para que te des cuenta de que ahí no hay IA, ¿no? O parece que no habría. Pero, sin embargo, hay que poder vislumbrar hasta dónde va a tomar partes de nuestra vida. Cosas que hacíamos los humanos, o que hacemos los humanos. Y qué estamos dispuestos a sacrificar en el trabajo que hace una IA. En cosas tan simples como lo que leemos en los periódicos, por ejemplo.
Diez libros que no existen14:24
Sí. Y eso… Ay, en el 2025 pasaron muchas cosas. Tenemos muchos casos del 2025. Y justo lo que dices de la prensa también aplica para las revistas y para los libros. Les voy a contar una historia que pasó el 18 de mayo del 2025. El Chicago Sun-Times publicó una lista de 15 libros para el verano. Ahí todo bien, ¿no? Nos gusta leer en el verano, y 15 libros está bastante decente para escoger. La cuestión es que 10 de esos libros no existían. Imagínate.
O sea, no mal, le atinó a cinco, ¿no?
Sí. Y bueno, los autores eran reales. Los títulos, no. Por ejemplo, tenía a Isabel Allende, que pues sí existe, pero nunca escribió «Tidewater Dreams». Entonces, pues, el culpable: Marco Buscaglia, este escritor independiente de Chicago. Admitió que hizo la lista con IA. Y la cuestión es: ok, se apoyó. La cuestión es que no la revisó. Y la redacción del Sun-Times tampoco la revisó antes de imprimirla.
¿Qué nos importa como humanidad?15:39
Sí, ahí, volviendo a hablar de la responsabilidad, ¿no? Oye, ¿cuántas personas no lo vieron? ¿A cuántas personas, perdón la palabra, pues no les valió madres?
Y ahí, polémica quizá un poquito, pero nos obliga a pensar, casi que como humanidad: ¿qué nos importa? Seamos honestos: ¿qué nos importa como humanidad? ¿Nos importa la publicidad? ¿Nos importa el marketing? ¿Queremos que el marketing sea súper artesanal? A mí, honestamente, no me podría dar más igual. Creo que hay cosas mucho más importantes. Pero como humanidad, como sociedad, ¿qué nos importa? ¿Y qué le estamos relegando a sistemas bastante incontrolables, bastante inciertos, que parecen hacer muy bien unas cosas…?
Pero, no sé, es como este meme de Homero Simpson, ¿no? Que está así como flaco, flaco, flaco, y por atrás tiene todo el pellejo estirado. Siento que a veces un poco así es el trabajo de IA. Sobre todo el trabajo de IA como esto de lo que hablábamos el otro día, lo que le llaman los midproxies, ¿no? Es como: te doy un prompt así, lo más escueto posible, apenas si te dibujo mi idea, y lo que me entregues tú, inteligencia artificial, ya se publica. Sale, y se nota, ¿no?
Sí, a veces hasta le dejan ahí el prompt.
Sí. Creo que ya no sale, pero la estrellita de Gemini, ¿no? O si era así como de: «Oye, brother…».
O «arroba Cris» o «arroba Jimena».
¿Quién tenía que revisar?17:15
Pero, o sea, ¿tú te habrías dado cuenta de que estos libros no existían? Bueno, yo creo que tú sí, porque eres un ñoñazo de la lectura. Pero el problema ahí es que el escritor confía en la IA, la agencia en el escritor y el periódico en la agencia. ¿Pero quién tenía que revisar? Y además, ¿van a revisar antes de creer o compartir algo que les diga una IA? De nuevo, hay que pensar muy bien en eso, porque es nuestra obligación. No podemos… con todos los sesgos, con toda la información y la desinformación que hay en este mundo. Pues justamente la toma, como ya dijiste, de una manera bastante descontrolada: tiene información de todos lados, de las fuentes, de lo que hay en internet. Pero también, ¿quién escribe en internet? ¿Quiénes tienen acceso a la tecnología, a escribir? Pues hay muchísimas personas, y es un sesgo tan, tan grande que siempre tenemos que revisarlo.
La IA conoce internet, no a la humanidad18:10
Claro, sí. Y además te quieren vender, de algún modo, que la IA es universal, que la IA sabe de todo y conoce la humanidad. No. La IA conoce el internet, que además es un fragmento bastante podrido de la humanidad, seamos honestos. El internet tiene años que no es un lugar bonito. It's wild out there: está gacho. Hay mucho odio en internet, hay muchos foros con mucha violencia. Entonces la IA sabe eso. Es una entidad que fue entrenada con eso.
No, y aparte, quiénes escriben. Porque eso pasa mucho también con la historia en general, con la memoria. ¿Quiénes escribieron los libros?
Claro. La historia la hacen los vencedores, decía Walter Benjamin, ¿no?
Sí. Y además los nombres con apellido. Pero, por ejemplo, muchas mujeres no habían estado representadas. Entonces…
De quién son las palabras19:18
No, y pensemos que de algún modo esta herramienta, esta tecnología, también anonimiza muchas voces, ¿no? Porque es como: agarro todo el conocimiento, todas las palabras del mundo, las echo en una licuadora, y las palabras ya no le pertenecen a nadie. Ahí los teóricos postestructuralistas más radicales dirían: pues sí, el lenguaje no le pertenece a nadie más que al lenguaje. Pero si nos sentamos ya en términos concretos de la vida de la gente, nuestras vidas están construidas sobre palabras. Al final del día, ¿qué es la propiedad privada sino palabras? Nuestra sociedad está sostenida en palabras: en el contrato social, en las cosas que aceptamos. Y todo eso son palabras, es discurso, es simbólico, ¿no?
Y nuestra existencia depende de nuestras palabras. «Los límites de mi mundo son los límites de mi lenguaje», decía Wittgenstein, ¿no? Entonces no podemos dejar que el lenguaje… No quiero decir que el lenguaje tenga que ser una cosa exclusiva del humano. Lo había sido: en toda la historia de la humanidad, el lenguaje era la única cosa que diferenciaba al humano de cualquier otro animal o de cualquier otra entidad viva, o que parecía estar viva. Y hoy ya no lo es. Hay otra entidad, otra cosa, que maneja el lenguaje, no sé si mejor, pero sí más rápido, más eficientemente y más todo que nosotros como humanos, ¿no?
Lo que ya hace con código20:49
Yo creo que sí, porque afortunadamente —o ya no sé cómo llamarlo— cada vez no tenemos faltas de ortografía, ¿no? Más tildes.
Sí, y deja tú más allá de la ortografía: las capacidades prácticas. Por ejemplo, las capacidades que tiene hoy la inteligencia artificial en materia de código. Estamos llegando ya a niveles incluso peligrosos para los cimientos de la sociedad. Porque pensemos que celebrábamos todos esta diversión de: «Ah, mira, ya le metieron el Modern Warfare al GTA». Pero esa cosa, poder hacer reverse engineering, hacer ingeniería reversa a videojuegos, era de las cosas más complicadas posibles. Por eso no pasaba mucho: era muy difícil. Y que ahora modelos como Claude 5.5 o como Fable lo estén haciendo en horas o en minutos da miedo. Porque eso significa que la misma inteligencia artificial, el mismo modelo, podría desencriptar o hacer ingeniería reversa, por ejemplo, a protocolos de ciberseguridad en bancos, o en aerolíneas.
Es que ya está pasando.
Borges y la biblioteca de Babel22:07
Sí, la verdad es que ha avanzado muchísimo.
Eh, platicábamos, ¿te acuerdas?, sobre Borges, sobre este texto: «La biblioteca de Babel».
En general, en Borges hay mucho este juego entre lo que existe, lo que es verdad y lo que parece verdad. Y al final del día es una pregunta sobre el lenguaje, una pregunta estructuralista incluso: ¿qué es el lenguaje? Porque parece que el lenguaje señala la realidad, que solo la describe. Pero otras teorías dicen que en realidad el lenguaje transforma el mundo. Y una cosa es cierta: si no nombramos y si no hablamos de las cosas que están en el mundo, esas cosas pierden importancia. Algunos dirían que pierden hasta existencia: que no existe nada hasta que lo nombras.
Entonces, un poco de ahí viene también esta necesidad nuestra de ponernos a platicar de estas cosas, porque nos parece importante. Estamos viendo cambiar el mundo en tiempo real. Queramos o no, está sucediendo y tiene consecuencias en todos los ámbitos. Este primer capítulo tuvo la intención de empezar a dibujar algunas pequeñas problemáticas que hemos empezado a notar, que nos parece importante platicar. Pero, pues, bueno…
Una regla para usarla23:32
Pues, para cerrar, ¿qué te parece si decimos una regla que llevamos a cabo cuando usamos IA? Yo, por ejemplo, mucho por el trabajo que hago: cuando me llegan textos o cuestiones, todo lo tengo que revisar, y más porque son datos históricos, o fechas, o personajes, o nombres, o momentos, o ciudades. Siempre tengo que verificar que todo haya sucedido, porque sí me ha tocado que hay datos en los que digo como así…
¡Un segundo!
Sí, es como: no lo sé. No lo sé, Rick. No lo sé, Rick. Como que lo reconozco y digo: está raro, no coincide. Como que esta ciudad en este tiempo no existía…
Sí, porque la verdad y la mentira son estructuralmente iguales, ¿no? La mentira no se esconde en la forma del lenguaje. La mentira y la verdad se ven iguales, ¿no?
Sí. Entonces yo, por ejemplo, en ese caso, reviso, ¿no? Yo creo que siempre es importante, si en esta cuestión de memoria o de investigación vas a usar IA, preguntarle: ¿de dónde vino este dato?, ¿dónde está la fuente? Abrir la fuente, verla, verificarla.
El eco de un eco24:54
Sí, tener trazabilidad de tu información, ¿no?
Porque además pensemos que hoy en día es aún menos confiable la información que hay en general en internet. Porque cuando empezó el internet —ya llovió—, la mayor parte de la información que existía en internet, por no decir que toda, era información generada por humanos, o era información de libros. Mi punto es que eran fuentes primarias, digamos. Y ahora mucha de la información que hay en internet, en forma de videos en YouTube, de textos, de blogs, de todo, es información generada también por inteligencia artificial. Entonces estamos escuchando el eco de un eco de un eco de un eco. Y la señal llega cada vez más… más pinche, ¿no? Más diluida, menos clara, menos evidente. Entonces hay que tener mucho cuidado, como tú dices, en lograr tener verdadera trazabilidad de la información.
¿En qué creemos?25:59
Y además, ¿en qué creemos? Porque, pues, estas personas que cambian su medicación porque se los dice una inteligencia artificial y se mueren, los que le ponen resistol a la pizza… O sea, no.
Sí, claro. Los límites son delgados. Hay mucha probabilidad de que algo salga mal, de nuevo, si pones toda tu confianza en lo que dice, lo que te ofrece o el trabajo que hace una inteligencia artificial. Y creo que el que esté libre de pecado, que tire la primera piedra, ¿no? Realmente no somos ni nosotros ni nadie que esté escuchando ajenos a esta experiencia, ¿no? No se hagan: de habérsela creído, ¿no? Sobre todo en los momentos más tempranos. Si recién empiezas a utilizar inteligencia artificial en tu trabajo, porque te la pusieron o por lo que sea, la realidad es que también hay una curva de aprendizaje en la interacción con esta herramienta. Y justo el inicio suele ser muy honeymoon, porque todo parece bien, todo parece cierto, todo parece rápido.
Se le nota en el detallito27:09
Y cuando te fijas en el detallito… Me da risa, porque ahora que estuvimos en Michoacán te decía esto de que, pues, chidas las artesanías, pero muchas eran las mismas artesanías que vimos en Guatemala, o que vimos en otros lugares. Parecen artesanías, y cuando las ves a detalle dices: esto parece medio hecho en China. Esto mismo, siento yo, se le nota muchas veces al trabajo hecho con inteligencia artificial. Sobre todo, de nuevo, este trabajo que no tiene iteración, que no tiene revisión de fuentes, que no tiene nada. Que es: hazlo y ahí vamos viendo. Se le nota, se le nota en el detallito, ¿no?
La responsabilidad es nuestra28:04
Sí, yo creo que ahora que convivimos con la inteligencia artificial, pues hay que usarla, pero hay que usarla con muchísima responsabilidad. Y volviendo a nuestra primera noticia, con la que abrimos este primer episodio: cuestiones legales, cuestiones médicas, cuestiones de salud mental, otro tipo de interacciones; si estás creando algo, si vas a hacer un paper, no sé, ahí sí hay que tener cuidado. Hay que hacerlo con responsabilidad, hay que ir con las personas expertas, hacer buenas investigaciones. Creo que es muy importante pensar en la ética, en la responsabilidad. Ok, alguna responsabilidad de estas herramientas, pero yo creo que la mayor parte, al menos en mi opinión, sí es nuestra, ¿no?
Sí, totalmente. Al final del día, digo, tiene demasiadas vertientes, que es lo que más miedo da, porque podría aplicarse a muchos ámbitos. Pero la realidad es que al final del día un algoritmo de inteligencia artificial necesita esa chispita para hacer algo: necesita que alguien le pida hacer algo, que alguien le diga que haga algo. Y ahí está la responsabilidad inicial, ¿no?
Cuéntennos su historia29:10
Entonces, bueno, que nos platiquen un poco de sus anécdotas. ¿Cómo les ha ido trabajando con inteligencia artificial? ¿Les ha mentido, les ha engañado? Y pues nada, que nos cuenten, y que nos cuenten de qué más les gustaría que platiquemos. Nosotros vamos a estar, en la medida de lo posible, cada semana platicando de temas que nos parezcan importantes, de temas en torno a, de nuevo, la inteligencia artificial, el diseño de experiencia, la tecnología.
Y lo que se junte.
Y lo que nos vaya saliendo en el camino. Entonces, bueno, nosotros fuimos Cris y Jimena, transmitiendo desde nuestra sala, con nuestro gato en su silla. Pero bueno, muchas gracias por esta…
De fondo era la lavadora.
Sí. Muchas gracias por esta charla.