Búsqueda · 32 momentos en 21 episodios
Isabel CorderoBorja TosarJosé EdelsteinFrancis VillatoroHéctor SocasMaría RibesGastón Giribetrelación calidad precio modelos modestosbenchmarkmmlu mejora significativacoste eficacia universidadBenchmark MMLUGoogle DeepMindGemmaLlamaMeta
Coste eficacia Universidad
Con
0:000:301:001:302:002:303:003:28
María Ribes explica que los autores del estudio enfatizan la buena relación calidad-precio y coste-eficacia de los modelos más modestos, destacando su capacidad para mejorar significativamente con pocos conjuntos de datos.
…mejorado un y pico puntos en el MMLU pero ha mejorado hasta 12 puntos en la acribia científica médica clínica, hasta 12 puntos. Los enormes modelos, el Llama, el Llama de Meta creo que tiene 70.000 millones de parámetros, ese ha mejorado pues como 3 puntos. O sea, una cosa que enfatizan ellos, los autores, es que esto sirve, como que tiene una gran relación calidad-precio, coste -eficacia porque los modelos más modestos son los que más han mejorado; entonces tú te lo puedes aplicar a tu universidad y no tienes que gastarte mucho dinero. Puedes tener un modelo pequeñito con no muchos subsets de Benchmark MMLU y mejora bastante, pero no lo he podido probar; está todavía en progreso. Y tiene una cosa que también te quería decir: que el whisper tiene una comprobación humana, porque hay muchos términos aquí al final del archivo. Especifican todos los términos que dan lugar a confusión, confunde los prefijos, sobre todo los griegos; que eso…
Significado #1 · Palabras #1
María Ribes explica que los autores del estudio enfatizan la buena relación calidad-precio y coste-eficacia de los modelos más modestos, destacando su capacidad para mejorar significativamente con pocos conjuntos de datos.
Habla: María RibesSignificado #1 · Palabras #1relación calidad precio modelos modestosbenchmarkmmlu mejora significativacoste eficacia universidad…mejorado un y pico puntos en el MMLU pero ha mejorado hasta 12 puntos en la acribia científica médica clínica, hasta 12 puntos. Los enormes modelos, el Llama, el Llama de Meta creo que tiene 70.000 millones de parámetros, ese ha mejorado pues como 3 puntos. O sea, una cosa que enfatizan ellos, los autores, es que esto sirve, como que tiene una gran relación calidad-precio, coste -eficacia porque los modelos más modestos son los que más han mejorado; entonces tú te lo puedes aplicar a tu universidad y no tienes que gastarte mucho dinero. Puedes tener un modelo pequeñito con no muchos subsets de Benchmark MMLU y mejora bastante, pero no lo he podido probar; está todavía en progreso. Y tiene una cosa que también te quería decir: que el whisper tiene una comprobación humana, porque hay muchos términos aquí al final del archivo. Especifican todos los términos que dan lugar a confusión, confunde los prefijos, sobre todo los griegos; que eso…