20 episodios
Tema: Lenguaje
02:09:10Habla: Francis Villatoro
↗

Búsqueda · 26 momentos en 10 episodios

María RibesBorja TosarGastón GiribetFrancis VillatoroHéctor Socasimagen representa palabra gatoruido en representación neuronalgramáticas generales chomsky máquinas turingtesis george turing algoritmos genéricosgramáticas chomsky poder computoredes neuronales función arbitrariasistemas formales equivalencia computacionalbiyección entre gramáticas y redesGeorge TuringNoam ChomskyFrancis VillatoroPlatónChomskyNueva GuineaGastón GiribetMaría Ribes

Gramáticas generales chomsky máquinas Turing

Ep517: Terraformar Marte; IA y Lenguaje; Chorro Galáctico

19 de junio de 2025
6 momentos
Con
0:000:301:001:302:002:303:003:33

Francis Villatoro explica que es difícil afirmar que una imagen representa directamente una palabra como 'gato', describiéndola como ruido y contrastando enfoques de representación simbólica y neuronal.

…y en ciertos momentos puedo decir: pues cuando le diré como la entrada al token de la palabra gato "Cat", pues apareció esta imagen. Yo que sea, en la representación de la atención, la imagen asociada a la atención. Pero, ¿dónde está ahí la palabra gato? O sea, no es fácil decir: Toda la imagen representa la palabra gato. Es una imagen que parece ruido. Son dos enfoques muy diferentes. Ambos son enfoques que se puede demostrar que son completos a nivel de cómputo; es decir, todo lo calculable, todo lo expresable en un lenguaje se puede obtener tanto en la representación simbólica, básicamente es equivalente a un algoritmo de tipo Turing, etc. Las gramáticas generales de Chomsky son tan generales que son equivalentes por la tesis de George Turing a cualquier máquina de Turing, a cualquier algoritmo genérico. Pero las redes neuronales también, con las redes neuronales, siempre Y cuando tengan más de una capa ya se puede demostrar que pueden representar de manera arbitraria cualquier función. Es una demostración clásica. Por lo tanto, son dos sistemas formalmente equivalentes en el sentido de que su poder de cómputo es exactamente el mismo, lo computable, pero no hay una, digamos, biyección; no hay una manera de asociar lo que uno hace y lo que el otro hace. Solo tengo entradas y salidas y puedo obtener para las mismas entradas las mismas salidas, pero no tengo una manera sencilla de conectarlos. Al menos ahora mismo no sabemos cómo hacer esa conexión y esa representación sin ver la entrada y la salida; no sé realmente qué está pasando dentro. Eso es, he encontrado la frase; dice literalmente nosotros sostenemos que para explicar el aprendizaje rápido a partir de los datos naturales de las lenguas reales, es necesario separar las representaciones de los sesgos inductivos, o sea que no solamente…
Significado #1 · Palabras #1