22 episodios
Tema: Lenguaje
01:34:14Habla: María Ribes
↗

Búsqueda · 28 momentos en 14 episodios

María RibesLuisa AchaerandioBorja TosarIgnacio CrespoFrancis VillatoroHéctor Socaslingüística cuantitativa ratios tipo tokenentropía de la información termodinámica shannonprocesamiento lenguaje natural entropías unigramasalgoritmos clasificación secuencias similaresShannonRECLanguage Resources and EvaluationChristian BellsPaleolíticoMaría RibesChristian BenzEva Dudkevich

Lingüística cuantitativa ratios tipo token

Ep554: Papers de Broma; Signos; Memristores; SETI; Antimateria

16 de abril de 2026
2 momentos
Con
0:000:301:001:302:002:303:003:29

María Ribes describe cómo los investigadores aplican técnicas cuantitativas de lingüística para analizar sistemas de signos, calculando ratios como 'tipo' y 'token'. Explica la relación entre la entropía de la información y la termodinámica.

…que es una base de datos que publicaron un grupo de autores en 2022 en el REC, que es Language Resources and Evaluation, es un congreso anual de lingüística computacional y entre esos autores está precisamente Christian Bells, ahí en este sistema y es una. Muestra de lingüística comparativa, entonces empiezan a calcular estadísticas propias de lingüística cuantitativa y te calculan los ratios de tipo y token. Sabéis toda la diferencia entre tipo y token en el procesamiento del lenguaje natural: entropías de unigramas, porque la entropía de la información es la misma casi que la entropía de, como es la termodinámica, la entropía de Shannon, según el tipo de unidades que más información dan o más densidad de información van a producir. Y esto introducen valores de estas características en algoritmos de clasificación y eso son algo me va a costar más explicar, lo vais a explicar vosotros, pero lo que hacen es evaluar hasta qué punto esas secuencias son similares entre. Sí, y hasta qué punto son predecibles. Esa es la cuestión: si tú puedes predecir lo que va después, utilizan modelos de regresión y las redes neuronales que llama aquí MLP, que sería Perceptrones Multicapa; no sé lo que es más que una red neuronal de tipo…
Significado #1 · Palabras #1