Búsqueda · 27 momentos en 10 episodios
María RibesBorja TosarGastón GiribetFrancis VillatoroHéctor Socassesgos inductivos estructuradosredes neuronales flexibilidad representacionalaprendizaje de idiomas modelos híbridoslenguaje formal sesgo cognitivo ribesgramática concepto clave chomskyrepresentación simbólica informáticaalfabeto símbolos reglas lenguajepalabras combinaciones símbolos válidosNoam ChomskyFrancis VillatoroMaría RibesChinaHéctor SocasBachNYU (Universidad de Nueva York)Lineal AVoynichAlto ValirioChatGPTPlatónGastón GiribetGeorge TuringChespierChakespeare
Alfabeto símbolos reglas lenguaje
Con
0:000:301:001:302:002:303:003:33
Francis Villatoro explica la importancia de comprender no solo el significado de las palabras, sino también la forma en que se expresan, haciendo referencia a un concepto clave de Noam Chomsky.
…que crean las tareas estudiando esos lenguajes formales bayesianos en la red neuronal para que sea capaz de adquirir la lengua inglesa. Y aquí nos dice: he apuntado una cosa porque sabía que no me iba a acordar, y eso es para que vosotros lo expliquéis. Un modelo híbrido entre simbolismo y conexionismo, o sea que combina los sesgos inductivos explícitos estructurados de los modelos simbólicos bayesianos y luego la flexibilidad representacional de las redes neuronales; y eso, os voy a dejar que lo explique, no me callo, pero es que me acuerdo de otra frase que dice que es importante para poder aprender, para que adquiera la lengua, desligar lo que es la representación del lenguaje formal del sesgo cognitivo. Es decir, no solo que entienda lo que dice, sino cómo lo dices, cómo poder expresarlo. No sé si me explico. A ver si encuentro esa frase. Y ahora os dejo que lo expliquéis. A ver... En las representaciones simbólicas se trabaja con lo que en informática llamamos un concepto clave de Chomsky: el concepto de gramática; tienes un alfabeto con una serie de símbolos y tienes un conjunto de reglas que te permiten conectar esos símbolos para hacer palabras, es decir, combinaciones de símbolos que son válidas. El lenguaje consiste en un conjunto de reglas que te dicen cómo puedes combinar los símbolos del alfabeto para obtener palabras válidas. Eso es la representación simbólica, la representación. Conexionista o representación neuronal es una representación de caja negra. Tú tienes un embedding, tienes una representación de los símbolos en forma de unos objetos que son objetos abstractos. Hoy en día, en redes neuronales, básicamente de convolución, son…
Significado #1 · Palabras #1
María Ribes explica cómo los niños aprenden a hablar frases y palabras que nunca han oído antes, planteando la cuestión de cómo adquieren las reglas gramaticales sin una instrucción explícita.
Habla: María RibesSignificado #16adquisición de lenguaje infantilreglas gramaticales sin instrucción explícitaplural y género en la adquisición del lenguajepasado verbal en el aprendizaje infantil…que se plantea este problema que ellos llaman el problema de Platón o el problema del estímulo pobre: que es que como un niño humano puede formular infinitas frases, puede formular cualquier frase sin haberla oído antes; es decir, que los niños no aprenden. Por imitación, porque pueden decir frases y palabras que no han oído nunca antes, y también, ¿cómo pueden los niños aprender las reglas sin que nadie se las explique? Como os decía antes, cuando tú adquieres la lengua, tu tutor o la persona con la que estás hablando no te dice ahora vamos a aprender el plural, ahora vamos a aprender a cambiar masculino a femenino, vamos a estudiar el pasado. ¿Qué es el problema que tenemos cuando aprendemos una lengua? Esa es la diferencia entre adquisición y aprendizaje. El aprendizaje es consciente. Diga usted. Una pregunta, ahora yo sé que formular la pregunta de esta manera acá, después de 45.000 años de…
Francis Villatoro explica la importancia de comprender no solo el significado de las palabras, sino también la forma en que se expresan, haciendo referencia a un concepto clave de Noam Chomsky.
Habla: Francis VillatoroSignificado #1 · Palabras #1sesgos inductivos estructuradosredes neuronales flexibilidad representacionalaprendizaje de idiomas modelos híbridoslenguaje formal sesgo cognitivo ribesgramática concepto clave chomskyrepresentación simbólica informáticaalfabeto símbolos reglas lenguajepalabras combinaciones símbolos válidos…que crean las tareas estudiando esos lenguajes formales bayesianos en la red neuronal para que sea capaz de adquirir la lengua inglesa. Y aquí nos dice: he apuntado una cosa porque sabía que no me iba a acordar, y eso es para que vosotros lo expliquéis. Un modelo híbrido entre simbolismo y conexionismo, o sea que combina los sesgos inductivos explícitos estructurados de los modelos simbólicos bayesianos y luego la flexibilidad representacional de las redes neuronales; y eso, os voy a dejar que lo explique, no me callo, pero es que me acuerdo de otra frase que dice que es importante para poder aprender, para que adquiera la lengua, desligar lo que es la representación del lenguaje formal del sesgo cognitivo. Es decir, no solo que entienda lo que dice, sino cómo lo dices, cómo poder expresarlo. No sé si me explico. A ver si encuentro esa frase. Y ahora os dejo que lo expliquéis. A ver... En las representaciones simbólicas se trabaja con lo que en informática llamamos un concepto clave de Chomsky: el concepto de gramática; tienes un alfabeto con una serie de símbolos y tienes un conjunto de reglas que te permiten conectar esos símbolos para hacer palabras, es decir, combinaciones de símbolos que son válidas. El lenguaje consiste en un conjunto de reglas que te dicen cómo puedes combinar los símbolos del alfabeto para obtener palabras válidas. Eso es la representación simbólica, la representación. Conexionista o representación neuronal es una representación de caja negra. Tú tienes un embedding, tienes una representación de los símbolos en forma de unos objetos que son objetos abstractos. Hoy en día, en redes neuronales, básicamente de convolución, son…
Francis Villatoro describe su enfoque para resolver problemas utilizando imágenes, ejemplificando con modelos de lenguaje donde la entrada se representa como una serie de imágenes que luego se transforman en tokens.
Habla: Francis VillatoroPalabras #13modelos de lenguaje como imágenestokens generados a partir de imágenesfrancis villatoro y representación visual…y nadie sabe cómo los símbolos se representan en esa imagen porque es una imagen aprendida. En el proceso de aprendizaje se aprenden las imágenes que representan de manera efectiva los símbolos y las relaciones entre símbolos. Entonces yo trabajo con esas. Imágenes y obtengo soluciones al problema que yo quiera, como en el caso de los modelos de lenguaje: pues generar el siguiente token para una registra de token. Básicamente yo represento la entrada en una serie de imágenes y genero nuevas imágenes y esas imágenes las transformo en un nuevo token y voy trabajando entonces en ese tipo de representación. No existe una representación simbólica; es decir, no existe. Un lugar donde yo pueda decir: voy a encontrar la palabra gato. Voy a encontrar la palabra perro. Lo que yo puedo, claro, yo veo el interior del algoritmo y en ciertos momentos puedo decir: pues cuando le diré como la entrada al token de la palabra gato…
Francis Villatoro explica que es difícil afirmar que una imagen representa directamente una palabra como 'gato', describiéndola como ruido y contrastando enfoques de representación simbólica y neuronal.
Habla: Francis VillatoroPalabras #17imagen representa palabra gatoruido en representación neuronalgramáticas generales chomsky máquinas turingtesis george turing algoritmos genéricos…y en ciertos momentos puedo decir: pues cuando le diré como la entrada al token de la palabra gato "Cat", pues apareció esta imagen. Yo que sea, en la representación de la atención, la imagen asociada a la atención. Pero, ¿dónde está ahí la palabra gato? O sea, no es fácil decir: Toda la imagen representa la palabra gato. Es una imagen que parece ruido. Son dos enfoques muy diferentes. Ambos son enfoques que se puede demostrar que son completos a nivel de cómputo; es decir, todo lo calculable, todo lo expresable en un lenguaje se puede obtener tanto en la representación simbólica, básicamente es equivalente a un algoritmo de tipo Turing, etc. Las gramáticas generales de Chomsky son tan generales que son equivalentes por la tesis de George Turing a cualquier máquina de Turing, a cualquier algoritmo genérico. Pero las redes neuronales también, con las redes neuronales, siempre Y cuando tengan más de una capa ya se puede demostrar que pueden representar de manera arbitraria cualquier función. Es una demostración clásica. Por lo tanto, son dos sistemas formalmente equivalentes en el sentido de que su poder de cómputo es exactamente…
María Ribes comenta sobre el funcionamiento de redes neuronales entrenadas con sistemas formales y métodos bayesianos para la generalización de reglas en lenguajes.
Habla: María RibesPalabras #5redes neuronales sistemas formalesmétodos bayesianos generalización de reglaslenguajes formales creados bayesianosmaria ribes redes neuronales…es la misma cosa, pero el niño ha generalizado que eso también es un perro, no solamente la generalización fonológica como decía antes o sintáctica, la simetría o el, si yo digo el niño, en la cama, pues tú puedes repetir como que el perro duerme en el cojín. Esa generalización de reglas y eso es lo que consiguen que haga sus redes neuronales entrenadas con este sistema, con estos lenguajes formales creados con métodos bayesianos. Me ha parecido muy interesante. Creo que me lo tengo que leer otra vez. Ha sido, lo he leído varias veces porque es difícil, ¿eh? Yo cuando se lo dije a Héctor digo, guau, es un poquito difícil, pero me parece muy interesante Yo no lo he leído, te confieso, cuando lo vi dije, ostras, qué paper tan complicado, no, ostras, María, digo, espero que me lo cuente porque esto se sale de mí De…
María Ribes aclara el significado de la palabra 'sintético' tal como se utiliza en un artículo sobre lenguajes formales y lingüística.
Habla: María RibesPalabras #10lenguaje sintético como artificiallingüística sintético aglutina clustersmétodos bayesianos para lenguajes formalesred con 25000 lenguajes formales…muy interesante Yo no lo he leído, te confieso, cuando lo vi dije, ostras, qué paper tan complicado, no, ostras, María, digo, espero que me lo cuente porque esto se sale de mí De mí también un poco, ¿eh? La parte lingüística es la que he entendido un poco Mejor también quería decir que habla mucho de lenguas sintéticas, ¿eh? Y aquí utiliza la palabra sintética en dos sentidos: sintética como artificial, que son estos lenguajes formales que yo digo que no es como el Alto Valirio, sino símbolos. Pero también en lingüística hablamos de sintético en el sentido de que aglutina, ¿no? Y de que va formando clusters, o sea que se refiere a ese concepto, ya está. Y ya está, son 25.000 lenguajes formales creados con métodos bayesianos, los que le dieron a la red. Y después el corpus natural, el Childes y destiló todo ese sesgo, que la palabra sesgo está negativa, pero en este caso es buena. Este es un sesgo lingüístico bueno porque es un sesgo cognitivo que te ayuda a predecir; es esa distribución a priori que es cómo…
Gastón Giribet interrumpe la conversación sobre el idioma francés y su relación con los catálogos de galaxias Messier para expresar una opinión personal sobre las diferencias percibidas en la pronunciación.
Habla: Gastón GiribetPalabras #16vocales en español timbre clarísimoidioma francés dimensiones ocultaspronunciación percibida gastón giribet…sí, Messier Messier Lo peor es que un francés Lo peor es que un francés no entendería el chiste porque para él los dos Messiers son totalmente distintos Para mí no Claro, claro Messier Messier, Messier El idioma ese, por favor Un idioma que tiene tantas Reglas como combinaciones es por definición arbitrario. Bueno, yo creo que ese idioma tiene dimensiones ocultas, porque hay cosas que ellos dicen que suenan diferentes; a mí me suenan igual, o sea, debe haber una dimensión. Pero eso es, perdonad que me meta en este momento; eso son todas las vocales, igual que para nosotros las vocales en español son totalmente, tienen un timbre clarísimo. Para mí que están mintiendo, para mí que están mintiendo. Para mí están mintiendo porque si no, ¿por qué hay cinco símbolos nada más? Pero yo lo quiero defender porque me pasa a mí con el español; cuando yo enseño a los estudiantes internacionales me dicen lo mismo, es que suena todo igual. Una vez me dijo una persona: me dijo que sonaba lo mismo, Francia que Infancia; es que es igual,…
María Ribes explica cómo se podría reconstruir una escritura antigua como el Lineal A, utilizando corpus de lenguajes posteriores y comparándolos con los anteriores.
Habla: María RibesSignificado #9 · Palabras #15reconstrucción lineal a desde corpus cescrituras y lenguas relación crucialproblema voynich descifrado escrituraalfabeto griego lectura sin lengua…y entonces a partir de lenguajes actuales inferir relaciones de ancestro, de parentesco entre lenguajes y a partir de ahí inferir y descifrar de manera aproximada con un corpus muy limitado pero usando el corpus de dónde ha derivado ese lenguaje en el futuro. Es decir, si hubiera, que no lo sé, si el lineal A precede a B y B a C y hubiera corpus en C suficiente, se podría llevar hacia el B y hacia el A y reconstruir. Bueno, lo que pasa ahí primero tenemos que especificar que son lenguas, que no son tipos de lenguajes, son lenguas y el problema son las escrituras, porque si no sabemos la lengua que subyace, no puedo leer ese texto. Es como si tú no hablas griego y tienes un texto en alfabeto griego, no lo puedes leer. Es lo contrario de que tú conoces las letras griegas, sabes cómo se pronuncian y las lees, pero no sabes lo que dice entonces ese es el problema, la diferencia entre escritura y la lengua; tú tienes un texto pero no sabes qué lengua hay debajo, que es el problema del Voynich si lo que se hace, bueno lo que lo hicieron en. El siglo XIX, la filogénesis de las lenguas; eso se podría revisar quizá con la IA, pero ahí más o menos está todo ya pues investigado de dónde viene cada lengua, las relaciones que tienen, la lingüística histórica. El problema es si esas lenguas, si solo…
Héctor Socas introduce una reflexión sobre la adaptación de nombres propios chinos a través de la transliteración al alfabeto latino.
Habla: Héctor SocasSignificado #13 · Palabras #8transliteración nombres propios chinosidentidad cultural nombres chinosalfabeto latino versus sistemas de escritura…solo gente muy purista lo cambia, ¿no? Pero ahí estamos entrando, Héctor, en los antropónimos, que eso es la identidad de una persona y su nombre oficial según está en su documento de identidad y eso no se puede cambiar así como así. No estoy de acuerdo. porque la autora china del artículo aquel, su nombre con su identidad cultural, no sé qué, son unos dibujitos y tal, y nosotros lo cambiamos a nuestro alfabeto y nadie se ofende por eso Alfabeto, pero es que es un alfabeto y el suyo no, el suyo es otro sistema de escritura, entonces lo que hacemos es transliterar lo que Tú lo has dicho antes, muy bien. O en ruso, los nombres rusos: ¿cuántas veces hemos visto escrito raro Tchaikovsky? ¿Cómo lo pronuncias? Tchaikovsky, pues yo ahí estoy contigo, Héctor; que al transliterarlo lo ponga como lo pronuncio Ch-A, o sea Ch -A, C-A,…
Francis Villatoro explica que, según las directrices oficiales en español, se debe pronunciar los nombres en su idioma original cuando están escritos con el alfabeto latino.
Habla: Francis VillatoroPalabras #18pronunciar nombres idioma originalalfabeto latino chespierrecomendación oficial chakespeare…mucho más fácil si lo transcribes, pero cuando estamos hablando de nombres propios, ahí ya entramos en unas cuestiones políticas legales que no se pueden. En nombres comunes, sí; y esta es mi unpopular opinion, esta es la suya y nos seguimos queriendo igual. Sí, oficialmente en español, según lo que había pedido, era obligatorio pronunciar los nombres en el idioma original. Si estaban escritos en el alfabeto nuestro, en realidad no era la recomendación oficial; es decir, hay que decir Chespier. La recomendación oficial no es decir Chakespeare y mucho menos cambiar la S por una Che. Yo creo que habría que cambiarlo para escribirlo como escribimos nosotros. Es que, aunque usen los mismos caracteres, aunque usen los mismos caracteres, su sistema de escritura es diferente. La correlación entre caracteres y fonema es diferente que en…