Héctor Socas explica cómo los modelos de lenguaje procesan el lenguaje humano, transformándolo en 'tokens' para su procesamiento interno y luego volviendo a traducirlo al idioma original.
Habla: Héctor SocasPalabras #18tokenización modelo lenguajetokens como idioma internoconversión idioma a tokensprocesamiento interno en tokenstraducción tokens a palabras…supongo que también será arbitrario dependiendo de, cada uno tendrá su propia dimensión. Lo llaman base de datos vectorial, creo recordar, para ver el rango de esos vectores, sí. Claro, esa es la dimensión. Bueno, Gastón, venga, lárgate, vaya pregunta que. Me has hecho hasta luego, Gastón. Gracias por unirte; gracias a ustedes. La próxima semana, la tokenización es lo que convierte del idioma con el que nosotros le hablamos al modelo de lenguaje: lo convierte su idioma interno. Ellos internamente piensan en tokens. Entonces, el primer paso es cuando nosotros le escribimos en cualquier idioma, hay una conversión de ese idioma a los tokens; todo el procesamiento se hace internamente en tokens, y luego a la salida, un último paso o uno de los últimos pasos es convertir de nuevo los tokens a palabras en el idioma que nos esté hablando. Bueno, entonces el pre-entrenamiento es coger una serie de tokens anteriores y predecir cuáles son los tokens siguientes en base a una cierta distribución de probabilidad que viene de lo que pasa en todos los miles de millones de textos con los que se ha…
Francis Villatoro menciona una revista prestigiosa especializada en neurociencia que tuvo gran repercusión al publicar un artículo sobre un procesador neuronal.
Habla: Francis VillatoroSignificado #11procesador neuronal neurociencianeuronas físicas electrodosmodelo pong procesador…que traiga usted este tema, porque es verdad que ha salido en muchos medios de comunicación y ha generado muchos titulares de esos, como dice Gastón, hiperbólicos y estaría bien que lo comentáramos un poco y lo desmitificáramos, ¿no? Así que, bueno, dale y… Una revista bastante prestigiosa en temas de neurociencia, y bueno, en su momento tuvo mucho eco; en su momento tuvo mucho eco, y en ese artículo usaban su procesador neuronal que combina neuronas físicas, verdaderas, digamos biológicas, con una serie de sensores a raíz de electrodos que permite introducir y leer, o sea, escribir y leer información en esa red de neuronas físicas, biológicas, y conectarlas con un ordenador que puede procesar algo. Entonces hicieron un modelo muy sencillito del juego Pong, del ping pong. Entonces en redes sociales la gente dijo: si haces el Pong tienes que hacer el Zoom. ¿Vale? Entonces, ¿qué pasa con eso? Pues que lo que pasa es que esta empresa lo que quiere, y de hecho lo comercializa, te lo vende, te vende este tipo de equipos para…
Francis Villatoro explica cómo Cortical Labs comercializa sus procesadores biológicos, denominados 'inteligencias biológicas sintéticas', y presenta su primer producto, el CL1.
Habla: Francis VillatoroSignificado #1 · Palabras #1cortical labs comercializa cl1inteligencias biológicas sintéticas de cortical labscl1 primer procesador de cortical labsidea ibm rigetti y cortical labs…es que esta empresa lo que quiere, y de hecho lo comercializa, te lo vende, te vende este tipo de equipos para laboratorio; su interés es una mejora significativa en el hardware, pero no en el software. Entonces para una de este tipo de empresas construir un Equipo de software específico para manejar sus entre comillas procesadores biológicos; ellos le llaman inteligencias biológicas sintéticas a ese tipo de dispositivos. El que, como la compañía se llama Cortical Labs CL, pues su primer procesador que venden se llama CL1. Lo que se le ocurrió, la misma idea que se le ocurrió a IBM, que se le ha ocurrido a Rigetti, que se le ha ocurrido a muchas empresas muchas veces. En la actualidad tenemos una gran ventaja. Si yo regalo un servicio a través de la nube, puedo conseguir que muchos aficionados se conecten a ese servicio y usen mis equipos para hacer lo que a mí me cuesta más dinero y más trabajo, que en este caso es el…
Francis Villatoro explica cómo Cortical Labs ofrece acceso a sus procesadores biológicos (CL1) mediante un servicio web, permitiendo a los usuarios programarlos remotamente.
Habla: Francis VillatoroSignificado #4 · Palabras #4investigadores mejorando equipamiento corticalservicio cloud de cortical labsprocesadores biológicos cl1servicio web cortical labspython para programar cl1simulación fiable de cl1…a través de la nube, puedo conseguir que muchos aficionados se conecten a ese servicio y usen mis equipos para hacer lo que a mí me cuesta más dinero y más trabajo, que en este caso es el software. Entonces, en 2022 mucha gente en redes sociales bromeó por El tema de ¿por qué no hacen el Doom? cuando la empresa dice: yo no puedo hacer el Doom porque no tengo tiempo de dedicar a personas. Mis investigadores tienen que dedicarse a mejorar el equipamiento. Ahora explicaré cómo es todos los detalles del equipo, oye, es complicado. Entonces lo que han hecho recientemente es sacar un servicio cloud. Tienen unos racks, unos bancos con muchos dispositivos CL1 y entonces a través de un servicio web tienes un simulador; a través de un cierto lenguaje, básicamente usando Python, tú programas un software para ejecutarse en esa máquina. Entonces tú tienes que verificar que el programa funciona en un simulador y tú lo mandas a un pool y ellos deciden qué programa les interesa ejecutar físicamente en la máquina. Entonces se ejecuta físicamente en la máquina, tú tienes el resultado de la simulación; la simulación es muy fiable, pero tú ves el resultado en la máquina física y estás súper contento y te pones la medallita de que lo has conseguido y entonces pues un chaval, un jovencito, Sin Cole, ha publicado en GitHub uno de estos simuladores y supuestamente simula el juego Doom. Hace que esta tecnología de procesamiento procese de alguna manera las decisiones que se toman en el juego Doom y ha sacado, claro, la empresa pues dijo: uff, esto es…
Francis Villatoro describe cómo Cortical Labs ha publicado un vídeo en YouTube para promocionar su procesador neuronal, mostrando a investigadores de la empresa entrevistándose y exhibiendo el dispositivo.
Habla: Francis VillatoroSignificado #5cortical labs promociona procesador neuronalinvestigadores muestran procesador en youtubevídeo de cortical labs con entrevistasdoom ejecutado en procesador neuronalcortical labs doom niño ciegojuego doom disparo aleatorio…Doom. Hace que esta tecnología de procesamiento procese de alguna manera las decisiones que se toman en el juego Doom y ha sacado, claro, la empresa pues dijo: uff, esto es una maravilla; si funciona el simulador, vamos a implementarlo en la máquina física. Y ha sido la excusa para sacar un vídeo en YouTube que ha tenido bastante eco, ¿vale? Entonces, en el vídeo de la eco, pues, vemos a investigadores de la empresa, pues, haciendo la chorrada de hacer una especie de podcast y una entrevista y mostrar allí el procesador y decir: ¡qué maravilla! Hemos logrado ejecutar el Doom. Después dicen: bueno, bueno, pero tranquilidad, ¿eh? Este procesador neuronal juega como un niño al Doom, un niño ciego al Doom; un niño ciego al Doom jugando al Doom, o sea, no ve la pantalla, no ve lo que pasa, lo que hace es disparar aleatoriamente y rotar aleatoriamente y mata por casualidad y solo funciona en cierto trocillo del juego Doom. estamos hablando de una cosa de juguete absolutamente y después por supuesto también de las críticas ha aprendido ese sistema neuronal biológico cómo se juega el Doom porque lo que vendían con el Pong y es lo que voy a contar ahora en el artículo era que…
Francis Villatoro analiza un video promocional de Cortical Labs sobre su procesador neuronal, señalando que se trata de una estrategia para generar expectación y vender sus equipos, cuyo costo es elevado.
Habla: Francis VillatoroSignificado #6procesador neuronal cortical labsneuronas mueren en seis mesessistema de recolección de basura neuronalinteligencia biológica sintética sbiplacas de petri e inteligencia biológicaorganoides y inteligencia artificialcortical labs e inteligencia biológica…una excusa transversal; es ruido, yo veo ruido de la máquina y le meto ruido y me importa un comienzo lo haga la máquina. Él dice que no, que ha hecho una serie de pruebas que aparentan que, pero no está nada claro, ¿vale? No está nada claro; es decir, este vídeo de Doom básicamente es un es un hype, es un sensacionalismo por parte de la empresa que quiere vender sus equipos, vale, vale como 35.000 dólares cada uno de los pequeños dispositivos. Más caro que mi libro. Y duran seis meses, porque las neuronas se mueren. Tienen un sistema de alimentación y de recolección de basura, es fascinante eso. O sea, se te muere la CPU, macho. Pero bueno, o sea que el vídeo pues hay que verlo con ese pizca de sal y la parte Doom hay que verla con muchísimas comillas, ¿no? Pero lo interesante es la idea, lo que se está trabajando y lo que se ha hecho en estos últimos años, desde el año 2002, en esto que llaman inteligencia biológica sintética, en inglés SBI y hay como dos líneas de inteligencia biológica sintética, la más avanzada, que es la de esta compañía, que es en plano, en una patada de Petri, puramente en un sustrato plano, y después la versión en 3D, que es utilizando organoides, a eso le llaman inteligencia con organoides, organoidal, Organoid intelligence. Entonces esa parte está mucho menos desarrollada, la parte 3D, pero ya hay organoides, hay pequeñas bolitas de neuronas; ahora contaremos todo lo que necesita además de las neuronas y con electrodos por fuera puedo meter información,…
Francis Villatoro aclara la terminología utilizada para referirse al sistema neuronal cultivado desarrollado por Cortical Labs, explicando la diferencia entre 'Dish Brain' (la parte biológica) y CL1 (el procesador híbrido completo).
Habla: Francis VillatoroSignificado #2 · Palabras #2dish brain como parte biológicacl1 procesador híbrido cortical labsinteligencia biológica sintética circuitodish beren en artículo anteriorcl1 como procesador híbridoplaca petri como dish…humano no falla nunca, ¿vale? Es una pala enorme, la pala es como dos veces y media, la pala es el tamaño del lado, entonces una bola que sale del lado opuesto, de la pared opuesta y esa bola se mueve, puede chocar con la pared y puede chocar con la paleta. entonces supuestamente el sistema neuronal, este circuito, esto que llaman inteligencia biológica sintética. Este circuito que en su momento original se llamó Dish Brain, cerebro en una placa de Petri, pero que ahora pues llaman CL1, el primer procesador de la compañía Cortical Labs. Creo que siguen llamando Dish Brain a la parte biológica de ese procesador, o sea que el procesador es todo el híbrido y Dish Brain creo que es la parte biológica, creo. Bueno, El nombre que le pusieron en el artículo 22 era Dish Beren y no hablaban de CL1, y ahora en publicidad hablan de CL1 por todos lados. Pero bueno, es lo mismo, lo venden, el CL1 lo venden. Entonces, ¿qué pasa? Bueno, pues yo tengo esa... ¿Perdón? No, solo decir que a lo mejor Dish se puede referir a la placa de Petri, ¿no? Claro, claro, a la placa de Petri se refiere a eso. Entonces, yo divido la región de electrodos en tres lugares: un lugar, llamémosle región de entrada, la región en la que yo hago el sensado del juego, en este caso dónde está la pelota, y dos regiones que le…
Francis Villatoro describe los procesadores utilizados en las maquinitas para sistemas neuronales cultivados, explicando que muestran información estadística sobre neuronas y electrodos, e incluso pueden emitir imágenes del juego Doom mientras se juega.
Habla: Francis VillatoroSignificado #12procesadores para sistemas neuronales cultivadosneuronas y electrodos en maquinitasimágenes de doom mientras se juegatrabajo interesante no comercial…que en este caso era el juego del Pong simplificado y ahora por lo que se quiere vender es que puede entender entornos un poquito más complejos como puede ser un Doom idealizado que es lo que yo puedo meter ahí porque no le puedo dar un pantallazo ¿vale? En estas maquinitas, en estos procesadores hay una pantalla que se supone que te da información estadística de cómo están las neuronas y cómo están los electrodos y que, bueno, para el vídeo han hecho que emita las imágenes del juego Doom mientras lo va jugando. Pero bueno, no son las cosas de las empresas comerciales. Entonces es un trabajo muy interesante porque lo que nos abre un poco la puerta. Fijaros que estamos diciendo aprendizaje automático, bueno, eso que entre comillas, pero bueno, aprendizaje automático con refuerzo en un sistema neuronal biológico que yo mantengo básicamente echando alimentos, echando azúcar, echan ahí unas sustancias para…