Búsqueda · 23 momentos en 13 episodios
Juan Carlos GilSilvana TapiaLuisa AchaerandioGastón GiribetFrancis VillatoroHéctor SocasIgnacio Cresposistema neuronal jugando pongalicia hurtado y reggaetóndiagrama temporal artículo electrodosregión de ruido en electrodoselectrodo neuronal para jugar ponginteracción de juego en 5 minutospaleta enorme en sistema neuronalelectrodo codifica posición vertical pongregión sensitiva para juego pongocho electrodos posición verticalentrenamiento sistema neuronal juega pongfrecuencia pong señal eléctricaelectrodo pong posición horizontalhercios pong pared opuestabola acercándose a la palaposición horizontal con electrodo pongruido al impactar bola pared pongimpacto pala pong sin ruidoPongFrancis Villatoroplaca de PetriAlicia Hurtado1024 electrodosHéctor SocasGPUsTPUsHDMEA Max OneMEABrett KaganScience CellDoomNeuronIPSC
Electrodo Pong posición horizontal
Ep549: Agujeros Negros; IAlucinaciones; Engranajes; Materia Oscura; Doom Neuronal
12 de marzo de 20269 momentos
Con
0:000:301:001:302:002:303:003:303:45
Francis Villatoro explica cómo se codifica la posición vertical de la bola en el juego Pong utilizando ocho electrodos en una región específica del sistema neuronal cultivado.
…yo voy jugando muchas veces. En el de Doom le ponen un refuerzo positivo que es una señal regular. Pueden ser varios pulsitos o alguna cosa regular. Pero sí, a mí eso me sorprendió. No hay retropropagación, obviamente. El refuerzo positivo o negativo es Meter ruido, o sea, algo caótico o algo regular. Es curioso eso. Es curioso. En el caso del Pong era sencillo porque era fácil de implementar. Dice Alicia Hurtado que le ponen reggaetón. Hay una figura en el artículo, un diagrama temporal; en vertical tienes todos los electrodos, los 1024 electrodos y después tienes la región de ruido. Se ve perfectamente porque se excitan muchos de ellos, más o menos aleatoriamente. En cada momento solo puedes excitar hasta 32, pero puedes elegir cuáles excitan. Entonces, de esa manera, en unos 5 minutos puedes proponer hasta 200 veces la interacción de juego: lo que es mover la bola hasta ver si choca con la pared o choca con la paleta. Recordad que la paleta es enorme. Pues en unos 5 minutos de entrenamiento, unas 300 etapas de entrenamiento, aparentemente el sistema neuronal aprende a jugar al juego. ¿Cómo codifico la posición? Fijaros que la bola tiene una posición horizontal y una posición vertical. La posición vertical la codifico con 8 electrodos en esa región sensitiva, en esa región de entrada. En esa región de entrada, que es una especie de rectángulo, yo elijo ocho electrodos, que son los ocho en los que voy a codificar la posición vertical. Entonces dependiendo de, solo voy a excitar uno de esos electrodos y es el que corresponda a, si eso está en horizontal lo pongo en vertical, a la posición vertical aproximada de la Bola, ¿y cómo codifico la posición horizontal con una frecuencia? La señal eléctrica que yo meto en ese electrodo, que tiene una pequeña duración, tiene una frecuencia. Si la frecuencia es de 4 hercios, es que la bola está en la pared opuesta a donde está la pala y la frecuencia crece linealmente conforme la bola se va acercando hasta una frecuencia máxima de 40 hercios en la pared en la que se encuentra la pala. entonces con frecuencia codifico la posición horizontal con posición física del electrodo, codifico la posición en vertical y si la bola cuando llega a la pala choca contra la pala pues no hay ruido y cuando llega a la pared porque la pala no la ha chocado pues genera el ruido que se supone que debe de molestar a ese sistema neuronal. Y así se consiguió, de una manera muy muy sencillita, que más o menos jugara el juego, el juego del Pong, es una cosa muy simplificada, entonces eso es lo que tenemos y eso no ha mejorado significativamente hasta 2026. Al menos lo que se ofrece en el cloud, en el sistema este de servicio o en la nube para acceder a este tipo de equipos, lo que se ofrece.…
Significado #3 · Palabras #1
Francis Villatoro menciona una revista prestigiosa especializada en neurociencia que tuvo gran repercusión al publicar un artículo sobre un procesador neuronal.
Habla: Francis VillatoroPalabras #13procesador neuronal neurociencianeuronas físicas electrodosmodelo pong procesador…que traiga usted este tema, porque es verdad que ha salido en muchos medios de comunicación y ha generado muchos titulares de esos, como dice Gastón, hiperbólicos y estaría bien que lo comentáramos un poco y lo desmitificáramos, ¿no? Así que, bueno, dale y… Una revista bastante prestigiosa en temas de neurociencia, y bueno, en su momento tuvo mucho eco; en su momento tuvo mucho eco, y en ese artículo usaban su procesador neuronal que combina neuronas físicas, verdaderas, digamos biológicas, con una serie de sensores a raíz de electrodos que permite introducir y leer, o sea, escribir y leer información en esa red de neuronas físicas, biológicas, y conectarlas con un ordenador que puede procesar algo. Entonces hicieron un modelo muy sencillito del juego Pong, del ping pong. Entonces en redes sociales la gente dijo: si haces el Pong tienes que hacer el Zoom. ¿Vale? Entonces, ¿qué pasa con eso? Pues que lo que pasa es que esta empresa lo que quiere, y de hecho lo comercializa, te lo vende, te vende este tipo de equipos para…
Francis Villatoro describe la tecnología desarrollada por Brett Kagan y su empresa, que tiene precedentes desde principios de los años 2000, utilizando una matriz de electrodos con limitaciones en su capacidad operativa.
Habla: Francis VillatoroSignificado #12 · Palabras #11matriz de electrodos hdmea max oneelectrodo de platino en mealimitaciones operativa matriz electrodos1024 electrodos útiles meamatriz de electrodos de 26000estimulación de 32 electrodosipsc de humanos o ratóncultivo de neuronas en placas petri25000 ipsc por centímetro cuadradoastrocitos apoyando a las neuronas…review del futuro de este tipo de tecnología, y lo que te vende es que esto va a ser algo revolucionario. Es Brett Kagan, no sé cómo se diga en inglés, K-A-G-I Kagan está bien. Bromeaban en el chat con el tema del Kagan. Para mí Sagan es Sagan, no sé ustedes. Bueno, pues este señor y su empresa desarrollaron una tecnología que ya tenía precedentes a principios de los años 2000 pero con muy poquitas neuronas, que es la idea de: imaginaos que yo tengo una matriz de electrodos con muchos electrodos. En este caso son electrodos; es una matriz de electrodos comercial que se compra y es una matriz que contiene. Se llama HDMEA Max One, es la más grande de la compañía MEA, que tiene 26.000 electrodos de platino distribuidos en 8 milímetros cuadrados. 26.000 electrodos, por supuesto con trampa; no podemos excitar y leer, o sea, escribir y añadir, o sea, excitar con una señal eléctrica un electrodo o leer la señal eléctrica de un electrodo de los 26.000, solo se puede trabajar con unos 1024, ¿vale? O sea, de los 26.000, solo son útiles 1024. Una pequeña limitación, ¿vale? Tampoco es que sea... Y a la hora de estimular, de que yo meta una señal en esos electrodos, solo puedo 32, ¿vale? O sea, que tengo una matriz de electrodos de 26 .000 electrodos que algún día en el futuro desearíamos y soñamos que podamos acceder a cada uno. uno de ellos individualmente en escritura y lectura, pero que ahora mismo tenemos que seleccionar 32 suficientemente bien separados para poder escribir. En el juego Pong, que publicaron en 2022 en Neuron, solo se utilizaban 8, solo 8 electrodos de escritura. ¿Qué hacemos con esa matriz de electrodos? Lo que vamos a hacer es poner una capa de neuronas, pero por supuesto las neuronas necesitan una serie de células que las apoyen, astrocitos, entonces, ¿cómo yo pego ahí encima una capa de neuronas? Por lo que hago es un cultivo de neuronas, utilizando células madre pluripotentes inducidas, las famosas IPSC. Las puedo obtener a partir de humanos o a partir de ratón; aquí se han utilizado ambas, en experimentos diferentes obviamente. Yo puedo hacer un cultivo, unas placas de Petri con un alimento adecuado para que sobrevivan bien esas células pluripotentes, que son 24 pocillos, pues yo en cada pocillo meto unas 25.000 IPSC, células pluripotentes, por centímetro cuadrado y obtengo un cultivo del orden de un millón de estas células. Yo con ciertas sustancias químicas y con lentivirus puedo modificar Esas células pluripotentes y hacer que se diferencien, por ejemplo, neuronas. Entonces yo hago ese proceso, es un proceso que dura varios días, y se logra que del orden de unas 100.000, en lugar del millón, básicamente voy a colar millón, millón y pico de…
Francis Villatoro describe el proceso para integrar una capa neuronal cultivada en placa de Petri con la matriz de electrodos utilizada por Cortical Labs.
Habla: Francis VillatoroSignificado #15 · Palabras #17capa neuronal cultivada petrialimento para neuronaschupito con líquido y electrodos…que, bueno, pues parezca que el sistema está funcionando y esas neuronas y esos astrocitos están bien conectados y hay una buena relación de alimentación de las neuronas a través de los astrocitos. Entonces, una vez que tienes ese cultivo ya funcional, ahora Lo sacas de tus pocillos de la placa de Petri y lo pones justo encima de los electrodos; esperas también un par de días para verificar que todo vaya bien, por supuesto le das alimento de vez en cuando. El vídeo se ve perfectamente; es como un chupito, vasito de chupito, pequeñito así, un plástico que tiene dentro un poquito de líquido y tienes ahí los electrodos y las neuronas justo encima de los electrodos. El artículo contiene obviamente imágenes por microscopía electrónica que te muestran perfectamente que se ven ahí los electrodos y se ven las neuronas encima, ¿no? Entonces, aunque inicialmente empecé con unas del orden del millón de células prolipotentes, al…
Francis Villatoro explica cómo se pretende reproducir el juego Pong utilizando un sistema neuronal cultivado, describiendo la mecánica básica del juego original.
Habla: Francis VillatoroSignificado #4 · Palabras #7neuronas funcionales sistema neuronalfactor de pérdida neuronas cultivadaselectrodo inyección señales eléctricasjuego pong reproducido sistema neuronalpalitas pong izquierda derechabola pong rebotando paredespalita grande sistema neuronalpared como paleta ponghumano no falla en pong…ven las neuronas encima, ¿no? Entonces, aunque inicialmente empecé con unas del orden del millón de células prolipotentes, al final me quedo pues con un número de neuronas efectivo y funcionales que no sé muy bien cuál es, pero que puede ser pues del orden. pues pongamos de 100.000, ¿no? Puede haber un factor de 1 a 4 en lo que he perdido. Entonces lo que yo tengo son ahí unas neuronas que están vivas, que puedo sostener vivas durante meses, unos 6 meses, y a las que yo puedo, en algunos electrodos, inyectar señales eléctricas. Entonces yo ahora, de toda la distribución de los electrodos, lo que se hizo para reproducir el juego del Pong es, bueno, yo quiero una versión, juguete del Pong; el Pong, acordaros que era, era una pantalla negra con dos palitas a ambos lados, izquierda y derecha, paquillas pequeñitas, que yo podía mover hacia arriba y hacia abajo. Dos jugadores con un mando, uno controla una palita y otro controla la otra palita y una pequeña bola que va rebotando en las paredes y que tú tienes que hacer que rebote en tu palita. Bueno, pues aquí Héctor se ha simplificado un poquito, ¿vale? No hay dos palitas, solo hay una, solo hay una palita. Esa palita es prácticamente como la mitad de la pared, ¿vale? No es una palita pequeña, es una pared grande, no, no, no, es una palita enorme, una pared; tú dices, este pon, no falla ni, un humano no falla nunca, ¿vale? Es una pala enorme, la pala es como dos veces y media, la pala es el tamaño del lado, entonces una bola que sale del lado opuesto, de la pared opuesta y esa bola se mueve, puede chocar con la pared y puede chocar con la paleta. entonces supuestamente el sistema neuronal, este circuito, esto que llaman inteligencia biológica sintética. Este circuito que en su momento original se llamó Dish Brain, cerebro en una placa de Petri, pero que ahora pues llaman CL1, el primer procesador de…
Francis Villatoro explica cómo divide la región de electrodos para el sistema neuronal cultivado, diferenciando una región de entrada para detectar la posición de la pelota en el juego y dos regiones motoras.
Habla: Francis VillatoroPalabras #4región de entrada para detectar pelotasistema neuronal cultivado placa petridos regiones motoras del sistema…hablaban de CL1, y ahora en publicidad hablan de CL1 por todos lados. Pero bueno, es lo mismo, lo venden, el CL1 lo venden. Entonces, ¿qué pasa? Bueno, pues yo tengo esa... ¿Perdón? No, solo decir que a lo mejor Dish se puede referir a la placa de Petri, ¿no? Claro, claro, a la placa de Petri se refiere a eso. Entonces, yo divido la región de electrodos en tres lugares: un lugar, llamémosle región de entrada, la región en la que yo hago el sensado del juego, en este caso dónde está la pelota, y dos regiones que le llaman regiones motoras, que son Las regiones en las que yo voy a leer la información de las neuronas para decidir qué hago con la pala. Entonces yo puedo esas dos regiones neuronas, una considerar que es pala para arriba, si vamos a ver una tecla que yo voy tocando la flecha para arriba y…
Francis Villatoro explica cómo se utiliza un algoritmo de aprendizaje con refuerzo para demostrar que el sistema neuronal biológico puede aprender, basándose en la hipótesis del principio de energía libre.
Habla: Francis VillatoroPalabras #14algoritmo aprendizaje refuerzo neuronalneuronas desagradan el ruidoseñal castigo neurona…De hecho, se han obtenido mejores resultados con las neuronas humanas que con las neuronas de ratón. Entonces, esto en 2022 no se tenía ni idea y yo creo que todavía no se sabe por qué ocurren esas cosas. Oye, ¿y se les premia...? Ahí está el punto. La idea es mostrar que este sistema neuronal biológico puede aprender. Entonces, para aprender, tienes que utilizar un algoritmo de aprendizaje, aquí se usa un algoritmo de aprendizaje con refuerzo. Entonces lo que subyace a este trabajo es una hipótesis que es la hipótesis del principio de energía libre que se interpreta en este contexto biológico como que a las neuronas les desagrada el ruido, recibir una excitación ruidosa en todos los electrodos que yo puedo controlar yo en todos los electrodos genero señales ruidosas sin un patrón durante un pequeño intervalo de tiempo y eso resulta que es la señal digamos de castigo si lo has hecho mal te castigo pensé que a lo mejor le quitaban la comida un rato la señal digamos de recompensa es no castigar vale si yo no pongo ruido no estoy castigando es Que el sistema está funcionando bien. Entonces yo voy jugando muchas veces. En el de Doom le ponen un refuerzo positivo que es una señal regular. Pueden ser varios pulsitos o alguna cosa regular. Pero sí, a mí eso me sorprendió. No hay retropropagación,…
Francis Villatoro explica cómo se codifica la posición vertical de la bola en el juego Pong utilizando ocho electrodos en una región específica del sistema neuronal cultivado.
Habla: Francis VillatoroSignificado #3 · Palabras #1sistema neuronal jugando pongalicia hurtado y reggaetóndiagrama temporal artículo electrodosregión de ruido en electrodoselectrodo neuronal para jugar ponginteracción de juego en 5 minutospaleta enorme en sistema neuronalelectrodo codifica posición vertical pongregión sensitiva para juego pongocho electrodos posición verticalentrenamiento sistema neuronal juega pongfrecuencia pong señal eléctricaelectrodo pong posición horizontalhercios pong pared opuestabola acercándose a la palaposición horizontal con electrodo pongruido al impactar bola pared pongimpacto pala pong sin ruido…yo voy jugando muchas veces. En el de Doom le ponen un refuerzo positivo que es una señal regular. Pueden ser varios pulsitos o alguna cosa regular. Pero sí, a mí eso me sorprendió. No hay retropropagación, obviamente. El refuerzo positivo o negativo es Meter ruido, o sea, algo caótico o algo regular. Es curioso eso. Es curioso. En el caso del Pong era sencillo porque era fácil de implementar. Dice Alicia Hurtado que le ponen reggaetón. Hay una figura en el artículo, un diagrama temporal; en vertical tienes todos los electrodos, los 1024 electrodos y después tienes la región de ruido. Se ve perfectamente porque se excitan muchos de ellos, más o menos aleatoriamente. En cada momento solo puedes excitar hasta 32, pero puedes elegir cuáles excitan. Entonces, de esa manera, en unos 5 minutos puedes proponer hasta 200 veces la interacción de juego: lo que es mover la bola hasta ver si choca con la pared o choca con la paleta. Recordad que la paleta es enorme. Pues en unos 5 minutos de entrenamiento, unas 300 etapas de entrenamiento, aparentemente el sistema neuronal aprende a jugar al juego. ¿Cómo codifico la posición? Fijaros que la bola tiene una posición horizontal y una posición vertical. La posición vertical la codifico con 8 electrodos en esa región sensitiva, en esa región de entrada. En esa región de entrada, que es una especie de rectángulo, yo elijo ocho electrodos, que son los ocho en los que voy a codificar la posición vertical. Entonces dependiendo de, solo voy a excitar uno de esos electrodos y es el que corresponda a, si eso está en horizontal lo pongo en vertical, a la posición vertical aproximada de la Bola, ¿y cómo codifico la posición horizontal con una frecuencia? La señal eléctrica que yo meto en ese electrodo, que tiene una pequeña duración, tiene una frecuencia. Si la frecuencia es de 4 hercios, es que la bola está en la pared opuesta a donde está la pala y la frecuencia crece linealmente conforme la bola se va acercando hasta una frecuencia máxima de 40 hercios en la pared en la que se encuentra la pala. entonces con frecuencia codifico la posición horizontal con posición física del electrodo, codifico la posición en vertical y si la bola cuando llega a la pala choca contra la pala pues no hay ruido y cuando llega a la pared porque la pala no la ha chocado pues genera el ruido que se supone que debe de molestar a ese sistema neuronal. Y así se consiguió, de una manera muy muy sencillita, que más o menos jugara el juego, el juego del Pong, es una cosa muy simplificada, entonces eso es lo que tenemos y eso no ha mejorado significativamente hasta 2026. Al menos lo que se ofrece en el cloud, en el sistema este de servicio o en la nube para acceder a este tipo de equipos, lo que se ofrece.…
Francis Villatoro explica que la implementación de sistemas neuronales con dispositivos comerciales es limitada, permitiendo pocos electrodos para recibir e incluso menos para enviar información.
Habla: Francis VillatoroSignificado #18 · Palabras #20electrodo neuronal para doomimplementación limitada con dispositivos comercialesneuronas y pocos electrodos…Pong, es una cosa muy simplificada, entonces eso es lo que tenemos y eso no ha mejorado significativamente hasta 2026. Al menos lo que se ofrece en el cloud, en el sistema este de servicio o en la nube para acceder a este tipo de equipos, lo que se ofrece. Son este tipo de dispositivos, que son los que se venden comercialmente. Entonces, implementar solo con eso, es decir, con la posibilidad de tener muy poquitos, estamos hablando de 4, 5, 6 electrodos para recibir información de las neuronas y tener 8, 10 electrodos para enviar información, codificar algo como el juego Doom. Es una barbaridad entonces hay que simplificar a la esencia misma de todo, la esencia del Doom y entonces interpretar que pues lo que era arriba y abajo pues ahora es disparo o no disparo y lo que es arriba y abajo en el otro pues ahora va a ser me muevo…
Francis Villatoro explica que el sistema neuronal cultivado es muy elemental, con pocas entradas que pueden interpretarse como binarias o un entero corto. Está comparando este sistema con los necesarios para entrenar una IA y resolver el juego Pong.
Habla: Francis VillatoroPalabras #9sistema neuronal cultivado elementalpong y entrenamiento de iabolas de neuronas con astrocitos…que están ahí, ¿no? Eso energéticamente es mucho más barato que tener una nave de CPUs o de GPUs o de TPUs que me está ejecutando mi software. Entonces tienen un artículo 2024 en el que comparan los costes, los costes en energía de su sistema biológico, que Digo hace una chorrada, porque esto, la verdad es que es una chorrada, porque estamos hablando de ocho entradas y que tú la puedes interpretar casi como entradas binarias o poco más, tienen muy poca codificación. Y una consideración de entero corto, un poco más. Es algo muy elemental. Entonces, comparar eso con un sistema de entrenamiento real para resolver el juego del Pong y hacen esa comparación y sacan que energéticamente esto es mucho más favorable y que va a haber un futuro maravilloso en el que, en lugar de GPUs y TPUs, pues todo el mundo utilizará este tipo de sistemas orgánicos, tanto en 2D sobre electrodos como en 3D, que es el tema en el que están trabajando ahora mucho, de quedar esas bolas, bolas de neuronas con astrocitos para que las alimenten y por fuera en la superficie con electrodos hacer pues toda la entrada y salida con esas bolas, ¿no? Pero no comparan el gasto energético no lo hacen por teraflop, ¿no? Porque si no, no, no, no, no, lo hacen por esto me ha gastado tanto y esto tanto para jugar al Pong, por aprendizaje, ¿vale? Dicen que esto aprende mucho más rápido, pero claro es que a las…