Búsqueda · 21 momentos en 9 episodios
Juan Carlos GilGastón GiribetFrancis VillatoroHéctor Socasdopamina inhibición aprendizaje pájarosnivel basal dopamina aprendizaje cantopájaros aprendizaje día equivocadodopamina inhibición pájaro día 80inteligencia artificial aprendizaje por refuerzoalgoritmo aprendizaje refuerzo pajaritosonogramas pájaros ondas gravitacionalessonogramas 128 por 128 reducción tamañoanálisis componentes principales aprendizaje pájarosalgoritmo análisis componentes principales dos variablesacetilcolina precursor dopamina pájarosestudios paralelos aprendizaje pájarosdopamina señal basal acetilcolinaaprendizaje canto pájaros estudio villatoroinvestigación pájaros jaula dos mesesinvestigadores experimentos similaresastro cápsulas federación astronómica españatrinos celestes ondas gravitacionalescanto de jilgueros paraleloFrancis VillatoroNatureTransformerOpenAIJuan Carlos GilPavlovHéctor SocasTaeniopygia gutataárea XMetaMacedonio FernándezAdriana Buenos AiresGastón GiribetFederación de Asociación de Organizaciones Astronómicas de EspañaAstro CápsulasOndas GravitacionalesJilguerosUniversidad de Buenos Aires
Estudios paralelos aprendizaje pájaros
Con
0:000:301:001:302:002:44
Francis Villatoro describe dos estudios paralelos sobre el aprendizaje en pájaros, destacando que uno de ellos investiga la acetilcolina, un precursor de la dopamina, ubicada en una región diferente del cerebro.
…contrastarla químicamente. Podemos inyectarle, no solo le meten una fibra óptica para ver los niveles de fosforescencia de la dopamina sino le meten también una pequeña aguja por la que pueden inyectar sustancias y se pueden inyectar sustancias inhibidoras. De la dopamina: si tú en un día determinado inhibes la dopamina de tal manera de que no puede has bajado el nivel basal y ya no puede haber esa diferencia, resulta que el pájaro al día siguiente ha aprendido con un día equivocado. Le puedes quitar un día de aprendizaje, dos días de aprendizaje al pájaro. Entonces, en el día 82, como les inhibiste la dopamina en el 80 y en el 81, pues sigue estando en el día 80, según la inteligencia artificial; con lo que eso te correlaciona que claramente la dopamina de alguna manera, no se tiene ni idea, no se tiene ni idea de cómo ocurre, codifica la señal de refuerzo interna en el algoritmo de aprendizaje con refuerzo que utiliza el pajarito para entender. Todo esto está muy simplificado, los sonogramas son imágenes en el tiempo de cada una de las frecuencias, son parecidos a las imágenes que vemos en las señales de ondas gravitacionales, algo parecido, lo que pasa es que son más complicados, son sonogramas un poquito más complicados, esos sonogramas son de 128 por 128 en uno de los artículos, hay que reducirlos a un tamaño mucho más pequeño, del orden de unos 100, un artículo que eran 100, el otro eran como 124, y después hay que aplicar un algoritmo de análisis de componentes principales para dejarlo básicamente en dos componentes, una componente y otra componente tal que se vea claramente el proceso de movimiento en ese espacio de dos variables del aprendizaje, como una cosa que sube. y bueno, es un algoritmo que técnicamente tiene muchas cositas, Es curioso e interesante porque son dos, prácticamente dos estudios muy paralelos entre sí, pero que se diferencian en ciertos pequeños detalles. Por ejemplo, uno de los artículos estudia, además de la dopamina, un precursor de la señal de dopamina basal que es la acetilcolina. Entonces la centriculina está en otra parte del encéfalo y. Cuando sube su nivel es cuando se excita; ¿qué la dopamina empieza a crecer lo que obliga al pajarito a entrenarse? No. Esa vida, entre comillas, aburrida de estar repitiendo una y otra vez, una y otra vez, una y otra vez, en solitario; imaginaros el bicho viviendo ahí en una jaula, el solito, durante dos meses, solo para que se diviertan los investigadores estudiando este tipo de detalles. No es muy distinto a mi vida. Yo estoy rodeado de investigadores en una jaula haciendo lo mismo. ¿Tú estás aprendiendo a cantar o a hacer alguna otra cosa bien? Sí, me canto como el traste. Me ha hecho gracia el paralelismo que has hecho con las ondas gravitacionales porque escribí una pequeñísima pieza que llamamos Astro Cápsulas para la Federación de Asociación de Organizaciones Astronómicas de España sobre la detección de ondas gravitacionales y la llamé trinos celestes, y la comparaba con canto de jilgueros. Ha sido spot on. Sí, totalmente. Es que eso es porque la última parte de la señal de la onda gravitacional hace ese chirp. También se dice chirp en el contexto de los fast radio bursts, que significa chirp; en inglés significa literalmente eso, trino, trino de un pájaro, porque tiene esa…
Significado #1 · Palabras #1
Héctor Socas y Francis Villatoro interrumpen la conversación sobre publicaciones científicas para introducir un nuevo tema: cómo aprenden los pájaros a cantar, relacionándolo con el entrenamiento por refuerzo similar al experimento de Pavlov con perros.
Habla: Héctor SocasSignificado #5aprendizaje de canto aves dopaminaentrenamiento refuerzo perros pavlovfotosíntesis artificial juan carlos…gran noticia al año siguiente vuelve a seguir publicando, ya no tiene eco y ahora resulta que ha publicado el último artículo y ha generado algo de medios Yo sé por qué ha generado eco, pero ya lo hablaremos en su momento, vamos entonces con lo que tenemos. ¿Algo más sobre esto? Ya hemos dado bastantes palos, se han quedado a gusto, bueno. Aquí hay; estoy oyendo ruido de pájaros, que no sé si se cuelan por el micrófono, espero que no. No sé si saben, pero... o a Juan Carlos que nos hable de la fotosíntesis artificial, pero ponía los pájaros porque ya llevan dos, llevas al menos dos episodios tratando de contarlo, bueno, venga; por cuanto a lo de los pájaros cuéntanos lo de los pájaros, cómo aprenden los pájaros, que por lo visto se pegan unos chutes de dopamina cuando van aprendiendo a cantar. La idea del entrenamiento por refuerzo es algo que todos conocemos de los perros de Pavlov. tú generas una señal, un timbre o lo que sea y cuando asocian el timbre a un alimento y entonces salivan cuando tocas el timbre, aunque no haya presencia de alimento. Este es un aprendizaje con refuerzo. Lo que ocurre en muchos mecanismos de aprendizaje en…
Francis Villatoro describe un estudio sobre aprendizaje del habla en aves, detallando cómo dos artículos relacionados fueron publicados simultáneamente en la revista Nature tras un proceso de revisión prolongado.
Habla: Francis VillatoroSignificado #9 · Palabras #3aprendizaje del habla aves natureartículos naturaleza publicados simultáneamenteestudios lentos revisión revista natureenvío artículos finales 2023 mediados 2024diamantes cebra taeniopygia gutataanimal modelo diamantes cebrainvestigación aprendizaje habla avesaprendizaje canto diamantes cebramachos cantan aves taeniopygia gutataprimer mes silencio aprendizaje aves…tienen más facilidad de adultos para aprender nuevas maneras de pronunciar y se les pegan todos los acentos, etc., otra gente no tiene esas ventajas. Es bastante difícil estudiar lo que realmente ocurre durante el proceso de aprendizaje infantil del habla. Aquí se utilizan unos pájaros modelos, hay muchos pájaros que se pueden utilizar, pero en concreto este estudio se basa, son dos artículos que se han publicado en la revista Nature Los dos se publicaron el mismo día, pero fueron enviados con una diferencia de unos cuatro meses Pero bueno, estos son estudios bastante lentos y que requieren mucho tiempo y se considera que se hicieron en paralelo Aunque se enviaron uno como a finales de 2023 y otro como a mediados de 2024, se publican los dos el mismo día y fueron aceptados con la diferencia de una semana Los dos artículos publican prácticamente lo mismo en cuanto a la tecnología que se usa, a lo que se mide, pero hay muchos pequeños detalles de diferencia, pero son a nivel de detalle Grosso modo, ambos refuerzan, uno refuerza las conclusiones del otro y viceversa Aquí se utiliza un animal modelo, un animal modelo es un pajarito que tenemos en las pajarerías, que es el diamante no sé si conocéis, los diamantes son unos pajaritos así pequeñitos que cantan y son muy bonitos y entonces aquí en concreto se ha utilizado un diamante que es el diamante cebra es el Taeniopygia gutata creo que en español el nombre que ten es diamante mandarín diamante mandarín, puede ser, sí, sí, sí, pues lo Mismo lo pongo y entonces este pajarito es un pajarito en el que solo cantan los machos y los jóvenes aprenden el canto aproximadamente en los primeros tres meses. Hay un primer mes en el que el pajarito es incapaz de cantar, pero oye a otros, llamémosle tutores, a sus padres y a sus vecinos en la jaula en la que se encuentre, en la colonia en la que se encuentre, oye. Después hay, en esa transición entre el primer mes, los 30 y los 40 días, más o menos, el pájaro. Empieza a cantar, y canta muy mal, ¿vale? Y hay como una especie de intención de reproducir el canto, porque para los pájaros es muy importante el canto, porque los separa en pequeñas colonias. Son pájaros gregarios, y entonces si cantan de la misma manera…
Francis Villatoro continúa explicando el proceso de aprendizaje del canto en pájaros, comparándolo con la forma en que los niños aprenden.
Habla: Francis VillatoroSignificado #4aprendizaje de canto pájarospajarito no pía al escucharaprendizaje del canto en pájarosimitación de sonidos colonia pajaritosmejora gradual reproducción sílabasproceso canto pájaros coloniapajarito aprende frases típicas familiaperiodo aprendizaje pajarito mesesaprendizaje del canto pájaroscámara anecoica experimento avespajarito entrenamiento sonido propio…durante unos dos meses hasta que realmente alrededor de los tres meses, 100 días, 110 días, en el peor caso, ya aprenden a cantar bien, digamos, la frase, el fraseo típico de su colonia, el fraseo típico que han aprendido. ¿Te acuerdas que la cuestión es? Pero el pajarito cuando escucha no pía, no canta en paralelo; es decir, no está produciendo el sonido y escuchándolo por una oreja mientras escucha a alguien que produce el sonido y le viene por la otra y compara el sonido que está recibiendo con el sonido que está emitiendo. El pájaro le ocurre lo mismo que a los niños o lo que parece que ocurre con niños. El pájaro memoriza el sonido, memoriza el sonido y después trata de entrenarse reproduciendo muchas veces estos pajaritos reproducen las frases típicas de su colonia, las reproducen miles de veces al día y van poco a poco mejorando día a día, van mejorando poquito a poco consiguiendo reproducir las sílabas. Entonces tú Dices, claro, si yo estudio este proceso con el pajarito en una colonia, pues es posible que vuelva a escuchar las frases típicas de la familia, de la colonia. Lo que tengo que hacer es coger el pajarito y después de haberlo presentado, es decir, entre pongamos los dos meses. A los dos meses cojo el pajarito y lo meto. En una cámara anecoica, en una cámara en la que está él solito durante un mes sin poder volver a escuchar nunca más el sonido de sus padres, solo lo que él produce. Y yo veo si va mejorando el sonido y lo que observan los experimentos es que sí, el pajarito sigue entrenándose. Lo que provoca que el pajarito se entrene es una producción de dopamina basal. Se sabe que hay una parte de su encéfalo que produce una hormona que induce la actividad de dopamina en un área, que es un área de los ángulos basales asociada a la vocalización,…
Francis Villatoro explica cómo el aprendizaje del canto en pájaros se relaciona con la producción de dopamina, indicando que los pajaritos disfrutan entrenándose.
Habla: Francis VillatoroSignificado #14dopamina entrenamiento pajaritosproducción dopamina canto pájarospajaritos disfrutan entrenándose…pajarito se entrene es una producción de dopamina basal. Se sabe que hay una parte de su encéfalo que produce una hormona que induce la actividad de dopamina en un área, que es un área de los ángulos basales asociada a la vocalización, que se llama el área X. Bien, pues lo que se ha observado es que hay un nivel importante de dopamina que fuerza al entrenamiento; es decir, el pajarito disfruta entrenándose y ese disfrute lo refleja elevando sus niveles de dopamina. Hay un nivel de dopamina que está como obligándole a reproducir el canto y lo que hace él es comparar lo que él produce con lo que él ha memorizado. Hace una comparación entre la señal auditiva memorizada y la señal auditiva producida por él y va tratando de modificarlo. Entonces es un proceso que se ha visto; entonces, para asociar bien qué pasa con los niveles de dopamina lo que se hace es utilizar unas…
Francis Villatoro explica cómo se evalúa la calidad de las sílabas en pájaros durante su proceso de aprendizaje del canto, comparando los sonogramas de un pajarito joven con los de uno adulto.
Habla: Francis VillatoroPalabras #12dopamina pájaros aprendizaje cantofosforescencia actividad dopaminaniveles dopamina tiempo real pajaritocirugía pájaro cámara anecoicasonogramas pájaro joven adultomejora sílaba pajarito díasintervalo frecuencias pajarito cambioprogresión aprendizaje canto adulto…bien qué pasa con los niveles de dopamina lo que se hace es utilizar unas proteínas fosforescentes que se acoplan a unas moléculas que están asociadas a la actividad de la dopamina y yo para ver esa actividad tengo que hacer una cirugía al pajarito, ¿vale? Yo tengo que abrirle la cabeza y meterle unas fibras ópticas que me permiten ver la fosforescencia de la actividad de la dopamina, y yo puedo ver los niveles de dopamina en tiempo real con ritmos del orden de 100 milisegundos. Cada 100 milisegundos puedo ver cómo es la actividad de dopamina en el pajarito, y por lo tanto asociar la actividad de dopamina con la calidad de las sílabas producidas. Esto, ya os digo, requiere una cirugía; el pajarito está con la cirugía como unos 10 días, y después se le mete en la cámara anecoica para que vaya aprendiendo solo. Claro, tú tienes de alguna manera que ver la calidad de la sílaba. Tú tienes que ver que hay una mejora. Si tú comparas el pajarito cuando empieza a pillar con el pajarito ya adulto, 90 a 100 días, observas que hay una enorme diferencia. Los sonogramas en el intervalo de frecuencias que emite el pajarito, cómo el tiempo va cambiando, claramente muestran las sílabas y claramente muestran la mejora. Cuando tú comparas esos sonogramas con el canto adulto, ves que hay una progresión hacia el aprendizaje. Para de moda, obviamente, para identificar la calidad de la sílaba dando un valor del día de la sílaba. Entre el día, aproximadamente el día 50 y el día 100, la inteligencia artificial aprende a identificar una sílaba a qué día corresponde y con un error de…
Francis Villatoro explica cómo los niveles de dopamina influyen en el comportamiento de aprendizaje del canto en pájaros, describiendo su relación con la motivación para repetir frases.
Habla: Francis VillatoroSignificado #8dopamina nivel basal pájarosmotivación repetir frases pájarosfluctuaciones dopamina canto pájarosciclo dopamina aprendizaje pájaros…sonograma es una porquería y ves uno que es bueno y dices: este es casi igual; se ve perfectamente. Entonces, la inteligencia artificial es capaz de puntuar cada sonograma con el día en el que en un pájaro típico se espera que haya producido este sonograma. Entonces lo que se ha correlacionado es el nivel, las fluctuaciones de dopamina respecto al nivel basal de dopamina. La dopamina durante el día va creciendo, va como haciendo que el pájaro se sienta cada vez más a gusto y siga queriendo entrenarse, siga queriendo repetir y repetir esas frases. Si el nivel de dopamina baja, que es cuando llega la noche, el pájaro ya deja de cantar, le pega un bajón y al día siguiente volvemos a reiniciar y volvemos otra vez en ese ciclo. Pues en ese nivel basal hay fluctuaciones locales de la dopamina y se han medido en la escala de los 100 milisegundos, una décima de segundo, y se ha visto que están asociadas a la sílaba. La calidad de la sílaba, cuantificada como el día asociado a esa…
Francis Villatoro describe dos estudios paralelos sobre el aprendizaje en pájaros, destacando que uno de ellos investiga la acetilcolina, un precursor de la dopamina, ubicada en una región diferente del cerebro.
Habla: Francis VillatoroSignificado #1 · Palabras #1dopamina inhibición aprendizaje pájarosnivel basal dopamina aprendizaje cantopájaros aprendizaje día equivocadodopamina inhibición pájaro día 80inteligencia artificial aprendizaje por refuerzoalgoritmo aprendizaje refuerzo pajaritosonogramas pájaros ondas gravitacionalessonogramas 128 por 128 reducción tamañoanálisis componentes principales aprendizaje pájarosalgoritmo análisis componentes principales dos variablesacetilcolina precursor dopamina pájarosestudios paralelos aprendizaje pájarosdopamina señal basal acetilcolinaaprendizaje canto pájaros estudio villatoroinvestigación pájaros jaula dos mesesinvestigadores experimentos similaresastro cápsulas federación astronómica españatrinos celestes ondas gravitacionalescanto de jilgueros paralelo…contrastarla químicamente. Podemos inyectarle, no solo le meten una fibra óptica para ver los niveles de fosforescencia de la dopamina sino le meten también una pequeña aguja por la que pueden inyectar sustancias y se pueden inyectar sustancias inhibidoras. De la dopamina: si tú en un día determinado inhibes la dopamina de tal manera de que no puede has bajado el nivel basal y ya no puede haber esa diferencia, resulta que el pájaro al día siguiente ha aprendido con un día equivocado. Le puedes quitar un día de aprendizaje, dos días de aprendizaje al pájaro. Entonces, en el día 82, como les inhibiste la dopamina en el 80 y en el 81, pues sigue estando en el día 80, según la inteligencia artificial; con lo que eso te correlaciona que claramente la dopamina de alguna manera, no se tiene ni idea, no se tiene ni idea de cómo ocurre, codifica la señal de refuerzo interna en el algoritmo de aprendizaje con refuerzo que utiliza el pajarito para entender. Todo esto está muy simplificado, los sonogramas son imágenes en el tiempo de cada una de las frecuencias, son parecidos a las imágenes que vemos en las señales de ondas gravitacionales, algo parecido, lo que pasa es que son más complicados, son sonogramas un poquito más complicados, esos sonogramas son de 128 por 128 en uno de los artículos, hay que reducirlos a un tamaño mucho más pequeño, del orden de unos 100, un artículo que eran 100, el otro eran como 124, y después hay que aplicar un algoritmo de análisis de componentes principales para dejarlo básicamente en dos componentes, una componente y otra componente tal que se vea claramente el proceso de movimiento en ese espacio de dos variables del aprendizaje, como una cosa que sube. y bueno, es un algoritmo que técnicamente tiene muchas cositas, Es curioso e interesante porque son dos, prácticamente dos estudios muy paralelos entre sí, pero que se diferencian en ciertos pequeños detalles. Por ejemplo, uno de los artículos estudia, además de la dopamina, un precursor de la señal de dopamina basal que es la acetilcolina. Entonces la centriculina está en otra parte del encéfalo y. Cuando sube su nivel es cuando se excita; ¿qué la dopamina empieza a crecer lo que obliga al pajarito a entrenarse? No. Esa vida, entre comillas, aburrida de estar repitiendo una y otra vez, una y otra vez, una y otra vez, en solitario; imaginaros el bicho viviendo ahí en una jaula, el solito, durante dos meses, solo para que se diviertan los investigadores estudiando este tipo de detalles. No es muy distinto a mi vida. Yo estoy rodeado de investigadores en una jaula haciendo lo mismo. ¿Tú estás aprendiendo a cantar o a hacer alguna otra cosa bien? Sí, me canto como el traste. Me ha hecho gracia el paralelismo que has hecho con las ondas gravitacionales porque escribí una pequeñísima pieza que llamamos Astro Cápsulas para la Federación de Asociación de Organizaciones Astronómicas de España sobre la detección de ondas gravitacionales y la llamé trinos celestes, y la comparaba con canto de jilgueros. Ha sido spot on. Sí, totalmente. Es que eso es porque la última parte de la señal de la onda gravitacional hace ese chirp. También se dice chirp en el contexto de los fast radio bursts, que significa chirp; en inglés significa literalmente eso, trino, trino de un pájaro, porque tiene esa…
Héctor Socas introduce una explicación sobre el rol de la dopamina en el aprendizaje, tomando como ejemplo el canto del pájaro.
Habla: Héctor SocasSignificado #7 · Palabras #6dopamina aprendizaje canto pájaroestructura neuronal dopamina cerebrorol dopamina aprendizaje…creo, que al final se vuelve más aguda porque los pájaros también suelen hacer ese sonido así y por eso le pusieron ese nombre; o sea, no es casualidad que sea o sea, sí es casualidad que suba la frecuencia al final, pero que por eso se le llama así el chirp. Francis, esto del aprendizaje, en este caso el canto del pájaro, pero cualquier cosa que aprendemos ya se pensaba que la dopamina ejerce un papel fundamental en decirle a nuestro cerebro: esto está bien, quédate con esto, fija esta estructura neuronal que te ha hecho hacer esto bien. Todas las hormonas o todos los neurotransmisores, la dopamina es un neurotransmisor, tiene muchas funciones en el organismo y la dopamina, una de las funciones que tiene, es el tema asociado al aprendizaje; digamos, fijar ciertas pautas en el aprendizaje,…
Francis Villatoro explica un estudio sobre la producción de dopamina en relación con el aprendizaje vocal, indicando que se ha observado una correlación entre la dirección del vector asociado a la dopamina y la dirección del aprendizaje.
Habla: Francis VillatoroPalabras #15dopamina aprendizaje vocal dirección…ha mejorado, cómo se ha movido en ese espacio; tengo un punto y al día siguiente tengo otro punto y al día siguiente tengo otro punto, y estos puntos más o menos crecen, pues puedo definir un pequeño vector. Bueno, pues definen también un vector asociado. a la producción de dopamina y obtienen que la dirección del vector asociado a la dopamina y el vector asociado a la dirección del aprendizaje están perfectamente correlacionados y eso le llaman la dirección de aprendizaje vocal. O sea que hay ciertos detalles técnicos muy interesantes en ese artículo y por supuesto son dos artículos que se apoyan el uno al otro, pero tendrán que ser verificados por futuras medidas y aquí hay muchísimas cosas, cómo influyen otros de los transmisores, ¿Cómo influyen muchos detalles? No se sabe, o sea, ¿cómo se codifica la información? Tampoco se sabe, o sea, hay muchísimas cosas que están abiertas, ¿no? Pero esto es un trabajo. ¿Puedo hacer un comentario? Esto va a ser el típico comentario del que llega a una mesa donde todos saben…
Francis Villatoro explica que actualmente hay mucho trabajo enfocado en entender temas relacionados con pájaros, aunque no haya un interés claro desde una perspectiva básica.
Habla: Francis VillatoroPalabras #7pájaros sin interés básicodificultades aprendizaje bebés niñoshormonas neurotransmisores aprendizaje humanoactivadores hormonas mejora aprendizaje…eso nada más porque me he olvidado; tenía olvidado este recuerdo después; no gastamos la plata en vinos en Pristo; no tendrás el contacto de esa gente que te paga por jugar a videojuegos metidos; ya no trabajan de eso, no tengo el contacto de esa gente. Aquí se está trabajando mucho, sobre todo por, claro, a quién le interesa este tipo de temas en pájaros; pues a nadie. Pero desde el punto de vista aplicado, una vez que entendamos este tipo de problemas. Además, hay muchas dificultades de aprendizaje en bebés y en niños que quizás se podrían corregir de manera farmacológica introduciendo activadores de ciertas hormonas, de ciertos neurotransmisores que permitieran una mejora en ese aprendizaje para corregir ese defecto que tienen en el aprendizaje algunos humanos. Entonces entender muy bien estos mecanismos en animales, en los que yo puedo hacer barbaridades y puedo hacerlo perrerías y no pasa nada porque pajaritos de estos pues tengo muchísimos; yo tengo una colonia en su laboratorio con miles de pajaritos de estos…
Gastón Giribet relata una experiencia personal donde se pudo inducir actividad cerebral específica en pájaros mediante grabaciones de cantos, incluso cuando el ave no estaba cantando.
Habla: Gastón GiribetSignificado #19pájaros soñando con cantar natureactividad cerebral respiratoria pájaroelectrodos cerebro parte respiratoriagrabación de otro pájaro cantandoactividad cerebral específica pájarosgrabaciones cantos inducen actividadciencia adivina sueños de pájarosejemplo romántico macedonio fernández…con su equipo, Marcos Trevisan y Ana Amador, gente que trabaja en la Universidad de Buenos Aires trabajan en pájaros en particular, y en una época, no sé si siguen trabajando en eso, trabajaban entre otras líneas de investigación en el sueño de los pájaros. Y me interesaba como corolario un paper muy conocido de ellos, que creo que publicaron en Nature en algún momento. Que era: trabajaban, se daban cuenta cuando un pájaro soñaba con cantar; a mí eso me había parecido alucinante porque justamente monitoreando en este caso de manera invasiva con electrodos y también tenían no solamente electrodos en el cerebro sino también en la parte respiratoria ellos podían ver básicamente que el cerebro tenía la misma actividad, lo voy a simplificar porque no recuerdo pero tenía por las noches la misma actividad que tenía cuando cantaba. Algunas cosas incluso se le podía inducir esa actividad poniendo la grabación de otro pájaro cantando; uno podía controlar eso, podía hacer que el pájaro empezara a soñar que cantaba induciendo eso como respuesta a un canto grabado cuando el Pájaro no cantaba, pero veías que la actividad del cerebro era exactamente la misma y era una actividad muy específica de ese canto. Entonces me parecía alucinante que pudiésemos pensar, podíamos adivinar; imagínate que hace 40 años alguien le decía: la ciencia será capaz de pensar, de saber cuándo un pájaro sueña con cantar. Es hasta el ejemplo, el working example es hasta romántico; a mí hace acordar una frase de Macedonio Fernández, un escritor argentino, que en una novela, la primera novela que escribió de las dos que escribió, que se llama Adriana Buenos Aires, no lo voy a citar, me voy porque no me acuerdo bien, pero decía algo así como Lo que se canta en los nidos es la segunda versión de lo que canta el día o algo así; es como diciendo: era una noche en Tapalqué, en un lugar en la provincia de Buenos Aires y el tipo pensaba, él mismo pensaba que estos pájaros estaban cantando, repitiendo a…
Francis Villatoro explica que la inteligencia artificial utilizada en un estudio específico ya estaba entrenada y no se modificó durante el proceso de entrenamiento del pájaro, diferenciando entre modelos que usan aprendizaje por refuerzo y aquellos, como los Transformers, que no lo utilizan.
Habla: Francis VillatoroPalabras #4aprendizaje por refuerzo inteligencia artificialtransformers modelos de atenciónestudios aprendizaje refuerzo negativomodelos grandes aprendizaje refuerzo…haciendo mal, tanto en una red biológica como artificial. He creído entender que sugería que la red neuronal y el diamante se han puesto de acuerdo para tener ambos dos la recompensa a la vez. Parece que hay un mecanismo de realimentación de la inteligencia. Artificial, bueno, la inteligencia artificial usada en este estudio estaba entrenada ya; no se cambia el entrenamiento durante el proceso de entrenamiento del pájaro. Bueno, en principio depende: hay inteligencias artificiales que utilizan aprendizaje por refuerzo y muchos que no lo usan. Los modelos de tipo Transformer, los modelos de aprendizaje basado en la atención, no usan aprendizaje con refuerzo. Aunque en los últimos años se ha reivindicado, porque bueno, hubo una serie de estudios que dijeron que el aprendizaje por refuerzo era negativo y que desaprendían estas inteligencias artificiales; pero lo que se ha descubierto es que si son suficientemente grandes, entonces el aprendizaje con refuerzo no desaprende, sino que permite seguir aprendiendo. Y eso es lo que fue noticia con Dixit, con la famosa inteligencia artificial china. Esta que hubo un movimiento en bolsa y monetario, fue porque habíamos utilizado técnicas de aprendizaje con refuerzo sobre inteligencias artificiales destiladas de la…
Francis Villatoro continúa hablando sobre el aprendizaje por refuerzo en el contexto de grandes modelos de lenguaje, mencionando que previamente se habían realizado intentos con resultados negativos.
Habla: Francis VillatoroPalabras #18aprendizaje por refuerzo modelos lenguajeresultados negativos aprendizaje refuerzointentos previos aprendizaje lenguaje…hubo un movimiento en bolsa y monetario, fue porque habíamos utilizado técnicas de aprendizaje con refuerzo sobre inteligencias artificiales destiladas de la inteligencia artificial de Meta. Entonces, eso está reivindicando; este año hay ya muchos trabajos. Sobre aprendizaje con refuerzo en el contexto de grandes modelos de lenguaje. Pero ya os digo, durante muchos años, pues lo que se había hecho, se había estudiado varias veces, se había intentado varias veces, se había visto que los resultados eran negativos. Ahora estamos viendo que si tú tienes Un número suficientemente grande de parámetros, que son pesos sinápticos en la neurona artificial, el aprendizaje con refuerzo sí parece positivo. Todo ese tema está todavía un poquito en el aire. ¿Cuál será el papel del aprendizaje con refuerzo en las…