María Ribes explica el concepto de 'loro estocástico' acuñado por Emily Bender para describir cómo ChatGPT funciona basándose en estadísticas y predicciones.
…El timo de la IA, ¿vale? Se llama The AI Con sobre el hype que ha habido y ella no es muy pesimista, no dice que vayamos a entrar en un nuevo invierno de la IA, pero que hay mucha paja, se ha puesto muy por encima, justo lo que hablábamos antes en la pausa. y esta Emily Bender es la que acuñó el término loro estocástico para ChatGPT porque lo único que hace es hacer estadísticas y predicciones de lo que puede venir antes y después que tiene un grado de perplejidad muy bajo, el grado de perplexity, cuán perplejo está el sistema a la hora de predecir, cuanto más bajo mejor predice Pero cuanto más alta esa perplejidad, peor te va a predecir, ¿no? Es como tu Siri o tu... ¿Cómo se llama esto? El corrector del móvil Si tú dices, hoy he, hoy he, pues lo que te venga después no va a ser perro, ¿No? Tiene que ser un verbo o una preposición. Hoy he comido, hoy he de caminar o lo que sea. Entonces, así es como funciona, pero claro, el gran modelo del lenguaje con millones de caracteres hacia atrás y hacia adelante. Así que ellos han pensado:…
María Ribes agradece a alguien y continúa la conversación sobre el entrenamiento de grandes modelos de lenguaje como ChatGPT, señalando los sesgos lingüísticos y culturales inherentes a estos sistemas.
Habla: María RibesSignificado #8entrenamiento modelos lenguaje chatgptsesgos lingüísticos en chatgptsesgos culturales en sistemas de lenguajefrancis y la contaminación de datoschatgpt sin emociones realessistema de predicciones chatgptfrancis villatoro experto en estadística…valga. No adquiere nunca la lengua si no está viendo a otra persona. Pero evidentemente cuando yo le muestro las cosas, lo aprende más rápido. Pero no es sine qua non. Lo que es completamente indispensable es que vea y que se relacione con esa otra persona. Ok, gracias. Un placer. Entonces, lo que querían hacer ellos es: vamos a entrenar a un gran modelo de lenguaje porque, por ejemplo, el chat GPT, ya sabéis que se entrena con millones de datos, millones de datos y aparte de la contaminación, como decía Francis, entran ahí todos esos sesgos, sesgos lingüísticos, sesgos culturales que no siempre son buenos y ChatGPT no habla, no sabe lo que dice y es el gran problema de nuestro tiempo. Yo creo que es antropomorfizar al modelo de lenguaje. O sea, cuando ChatGPT te dice a ti: qué grande eres, qué buena frase me has dicho, estoy muy contento de poderte ayudar; ChatGPT no está contento. Eso no es lenguaje, porque para que sea un enunciado lingüístico tiene que haber una emoción ¿vale? y ChatGPT no puede sentir emociones, es como data, ahí lo dejo. Entonces no sabe lo que dice, lo único que hace es un sistema de predicciones, eso ya lo hemos explicado muchas veces y Francis es el gran experto en esto, en las predicciones, las estadísticas. A mí me gusta mucho el término que acuñó Emily Bender, que ella es lingüista, es lingüista computacional y estoy leyendo un libro ahora de ella que se llama El timo de la IA, ¿vale? Se llama The AI Con sobre el hype que ha habido y ella no es muy pesimista,…
María Ribes explica el concepto de 'loro estocástico' acuñado por Emily Bender para describir cómo ChatGPT funciona basándose en estadísticas y predicciones.
Habla: María RibesSignificado #1 · Palabras #1loro estocástico acuñado por emily bendergrado de perplexity en chatgptsiri como ejemplo de predicción…El timo de la IA, ¿vale? Se llama The AI Con sobre el hype que ha habido y ella no es muy pesimista, no dice que vayamos a entrar en un nuevo invierno de la IA, pero que hay mucha paja, se ha puesto muy por encima, justo lo que hablábamos antes en la pausa. y esta Emily Bender es la que acuñó el término loro estocástico para ChatGPT porque lo único que hace es hacer estadísticas y predicciones de lo que puede venir antes y después que tiene un grado de perplejidad muy bajo, el grado de perplexity, cuán perplejo está el sistema a la hora de predecir, cuanto más bajo mejor predice Pero cuanto más alta esa perplejidad, peor te va a predecir, ¿no? Es como tu Siri o tu... ¿Cómo se llama esto? El corrector del móvil Si tú dices, hoy he, hoy he, pues lo que te venga después no va a ser perro, ¿No? Tiene que ser un verbo o una preposición. Hoy he comido, hoy he de caminar o lo que sea. Entonces, así es como funciona, pero claro, el gran modelo del lenguaje con millones de caracteres hacia atrás y hacia adelante. Así que ellos han pensado:…
María Ribes introduce una broma común dentro del campo de la lingüística sobre ChatGPT, sugiriendo que parece tener un 'lenguaje 1' basado en inglés debido a la gran cantidad de datos en ese idioma.
Habla: María RibesSignificado #6chatgpt lenguaje 1 ingléssesgo lingüístico estructura inglesacorpus mayoritario en inglésmaria ribes sesgo lingüístico…que todavía no es parte de la red neuronal en sí; que es una especie de abstracción del lenguaje a conceptos, que es lo que luego se tokeniza. Pero bueno, no sé, me parece una pregunta interesante, no tengo claro el asunto. Si tienes razón, tenéis razón, pero Dentro de mi campo, dentro de la lingüística, sí que bromeamos con que ChatGPT tiene lengua 1 de inglés, quizás porque sea el corpus mayoritario en inglés, pero es que el sesgo lingüístico, que es lo que estoy trabajando yo ahora, no el sesgo cultural, ni sexista, ni racial, que también lo tiene, el sesgo lingüístico siempre denosta todo lo que no sea la estructura inglesa; la estructura de la gramática lengua inglesa funciona mejor desde el inglés y cuando lo traduce, o cuando lo habla en cualquier otra lengua, por ejemplo en latín, también habla latín el CGPT. Pero no bien, no bien y habla como hablaría una persona de habla inglesa, traduciendo, ¿no? Tiene muchas más fuentes en latín, claro. ¿Cómo? Tiene muchísimas más fuentes en latín, claro, es que estadísticamente... Pero declina, declina, ¿sabes? No es que te…
Héctor Socas comenta sobre una hipótesis planteada por Borja Tosar, según la cual ChatGPT consulta al profesor Francis Villatoro para obtener respuestas.
Habla: Héctor SocasPalabras #7chatgpt consulta a villatorohipótesis de borja tosargravedad cuántica en chatgpt…Tosar. No me digas, hipótesis Tosar. Que me la cuente la hipótesis Borja porque yo no sé cuál es. La hipótesis Tosar es que ChatGPT le pregunta a Francis por la noche. Ah, es que yo, sí, sí, sí, hice una movida de eso. Y el tío, lo dijiste el otro día, y el tío dice que se lo preguntó a ChatGPT y le responde ChatGPT Me encanta tu hipótesis, Borja. Nosotros consultamos a ChatGPT y ChatGPT consulta al profesor Villatoro. Probablemente a las 2 y las 5 de la madrugada cuando todo el sistema tiempa por culpa de la gravedad cuántica. Confirmo que sí. Si alguna vez tardó en responder, no es porque Villatoro esté dormido, es porque me estoy quitando el sombrero ante su última entrada del blog. ¡Guau! Por eso Francis no duerme. Yo le mando a Francis una cosa que hice y él decide si la publica o no. Te voy a…
Borja Tosar expresa su acuerdo con María Ribes sobre la publicidad personalizada en ChatGPT y sugiere añadir elementos llamativos como purpurina y unicornios.
Habla: Borja TosarPalabras #15publicidad personalizada en chatgptpurpurina y unicornios en chatgptanuncios en chatgpt hablandochatgpt y publicidad colgatefenomenología y preguntas filosóficasel show de truman como referenciaexperiencia inusual con chatgpt…a mí me molesta, que se va a un testo y me ayuda Yo, para que me pongan anuncios de cosas que no me interesan, prefiero que me pongan de los que sí me interesan, claro, y yo cuando a mí me dicen, podemos usar su información para hacer anuncios y tal, El anuncio me lo van a poner igual, pues me da algo que me interese. Totalmente de acuerdo, dale purpurina y unicornios. Van a poner anuncios en ChatGPT. Van a poner anuncios en ChatGPT, pero hablando, en la respuesta, si esto no se ponga al lado, en la página web. Ostras, ¿te imaginas? Espero que lo hagan de manera sutil, porque últimamente no. Hay nada sutil. Uno le hace una pregunta: ChatGPT, hola, tengo una pregunta de filosofía. ¿Crees que hay objetos que son solamente su propia representación? Y te dice: muy buena pregunta desde el punto de vista de la fenomenología. Cepilla tus dientes con Colgate. Como el show de Truman. El show de Truman estaba pensando lo mismo. Oye, nada, antes de terminar con este tema, creo que Habría que ir dando carpetazo, pero no me gustaría hacerlo sin algún pequeño alegato en desagravio porque aquí a veces estamos como siempre poniendo frenos, poniendo cotas a la ilusión, al entusiasmo y al sense of wonder. Yo quiero reivindicar el sense of…
Héctor Socas expresa su asombro ante los grandes modelos de lenguaje como ChatGPT, refiriéndose a las quejas sobre errores en la herramienta como una reacción desproporcionada.
Habla: Héctor SocasSignificado #9errores en versión gratuita chatgptreacción desproporcionada a chatgptferrari como metáfora de chatgpt…algún día poder interactuar como con HAL 9000. Yo no pensaba que fuera a ver esto en mi tiempo, o sea, yo pensaba que el autocorrector del móvil era lo más parecido que yo iba a ver a algo con lo cual entonces a mí la irrupción tan repentina, porque ha sido. Muy repentino, de estos grandes modelos de lenguaje, a mí me flipa. Y me viene la gente quejándose; me venía quejándose un compañero de que su versión gratuita de CharGPT se le había inventado una referencia. Digo, pero tío, me vas a quejar de eso; pero es como el tío que le regalan un Ferrari y se queja de que al pasar de quinta a sexta le petardea. Pero tío, te ha regalado un Ferrari. ¡Ah, qué ejemplo más bueno! No lo sé; es que no sé si somos conscientes, pero si simplemente para ponerte a jugar y ponerte a hablar y contarle tus penas y que te responda, tío, y que sea capaz de pillar el humor, eso que leímos antes de la hipótesis.…