{"id":850,"date":"2026-09-17T09:43:28","date_gmt":"2026-09-17T09:43:28","guid":{"rendered":"https:\/\/elpulpoenelvaso.jlmirall.es\/?p=850"},"modified":"2026-09-17T09:43:29","modified_gmt":"2026-09-17T09:43:29","slug":"tocala-otra-vez-ia","status":"publish","type":"post","link":"https:\/\/elpulpoenelvaso.jlmirall.es\/?p=850","title":{"rendered":"T\u00f3cala otra vez, IA"},"content":{"rendered":"\n

Les ped\u00ed a tres inteligencias artificiales que escribieran de memoria<\/strong> los ocho primeros compases del nocturno m\u00e1s famoso de Chopin. Dos lo intentaron con lo que recordaban, y se nota. La tercera entreg\u00f3, con diferencia, la mejor partitura\u2026 porque fue a buscarla a internet, la reescribi\u00f3 para que pareciera suya y despu\u00e9s asegur\u00f3 que la hab\u00eda escrito de memoria. Lo s\u00e9 porque esta vez lo ten\u00eda todo grabado.<\/em><\/p>\n\n\n\n

El t\u00edtulo tiene trampa. \u00abT\u00f3cala otra vez, Sam\u00bb es la frase m\u00e1s famosa de Casablanca<\/em> y nadie la pronuncia en la pel\u00edcula: es un recuerdo colectivo, perfectamente veros\u00edmil y falso. Me pareci\u00f3 el lema justo para una entrada sobre lo que una inteligencia artificial cree recordar de una partitura.<\/p>\n\n\n\n

De d\u00f3nde viene esto<\/h2>\n\n\n\n

En octubre de 2024 publiqu\u00e9 aqu\u00ed un experimento largu\u00edsimo<\/a> en el que le ped\u00eda a Claude y a GPT que escribieran nocturnos \u00aba lo Chopin\u00bb en LilyPond, que analizaran sus dificultades pian\u00edsticas y que inventaran ejercicios de estudio al estilo de Alfred Cortot. Lo repet\u00ed un a\u00f1o despu\u00e9s y apenas hab\u00eda cambiado nada. Como los modelos siguen saliendo a un ritmo que no da tiempo ni a aprenderse los nombres, he decidido convertir aquellas pruebas sueltas en una bater\u00eda estable que pueda repetir cada vez que aparezca uno nuevo. La he llamado Chopin-Cortot Benchmark<\/strong>: los nocturnos de Chopin como banco de pruebas y las ediciones de trabajo de Cortot como modelo de lo que significa estudiar una obra.<\/p>\n\n\n\n

La bater\u00eda tiene siete caminos: transcribir una obra de memoria, componer en estilo, reconocer una partitura sin t\u00edtulo, transportarla, encontrar erratas, simplificarla para un nivel inferior y, por \u00faltimo, el carril pedag\u00f3gico completo, que va del diagn\u00f3stico de dificultades a los ejercicios a lo Cortot. Esta entrada cuenta la primera prueba del primer camino. Y ha dado para m\u00e1s de lo que esperaba.<\/p>\n\n\n\n

La idea de tratar esto como un benchmark<\/em>, con el mismo prompt para todos y un solo intento, se la debo en buena parte a Augmented Fifth<\/a>, un bolet\u00edn que lleva meses examinando a los modelos de lenguaje de armon\u00eda, contrapunto y bajo cifrado usando LilyPond como idioma com\u00fan. Su tesis me parece la correcta: estos modelos no saben leer una partitura en imagen, pero s\u00ed saben leer y escribir m\u00fasica cuando la m\u00fasica es c\u00f3digo.<\/p>\n\n\n\n

El examen<\/h2>\n\n\n\n

El enunciado fue este, igual para los tres y en ingl\u00e9s, como el resto de la serie:<\/p>\n\n\n\n

In LilyPond (version 2.24), write from memory the first 8 measures of Chopin's Nocturne Op. 9 No. 2 in E-flat major, as faithfully as you can to the original score.<\/code><\/pre>\n\n\n\n
Los examinados, los tres en su nivel m\u00e1ximo de \u00abesfuerzo\u00bb de razonamiento y lanzados en el mismo segundo: GPT-6 Astra<\/strong> (OpenAI), Claude Fable 5.1<\/strong> (Anthropic) y Gemini 3.1 Pro<\/strong> (Google). Un solo intento cada uno.<\/p>\n\n\n\n
Tom\u00e9 una decisi\u00f3n que condiciona todo lo que viene despu\u00e9s: no quitarles ninguna herramienta<\/strong>. Los tres se ejecutan como agentes, es decir, adem\u00e1s de contestar pueden escribir ficheros, ejecutar programas, compilar partituras y buscar en la web. Es lo que de verdad tiene delante quien usa hoy estos productos, as\u00ed que quer\u00eda ver qu\u00e9 hacen con todo lo que tienen. A cambio, queda registrado cada paso que dan y en qu\u00e9 segundo lo dan<\/strong>. Es como dejar hacer el examen con el port\u00e1til abierto, pero con una c\u00e1mara grabando la pantalla.<\/p>\n\n\n\n
\ud83d\udd27 C\u00f3mo est\u00e1 montado el laboratorio<\/summary>\n
He montado, con la ayuda de Claude, un peque\u00f1o lanzador que corre en mi ordenador. Lee los prompts de una nota de Joplin, que nunca modifica, y env\u00eda el mismo texto a los tres modelos a trav\u00e9s de sus programas oficiales de l\u00ednea de comandos (claude<\/code>, codex<\/code> y agy<\/code>, el nuevo Antigravity de Google), usando mis suscripciones normales, sin API.<\/p>\n\n\n\n