Búsqueda · 22 momentos en 10 episodios
Alberto ApariciBorja TosarHéctor SocasGastón GiribetFrancis Villatorofactor de valles artículo dimetilsulfurointerpretación resultados estadísticos delicadacálculos estadística relativamente sencillafactor de valles 17 publicaciónvalor p periodistas interpretaciónrevistas científicas factor bayesFrancis VillatoroDavid KippingSigmafactor de Vallefactor de Bayesvalor PHéctor SocasVickiepingMadhu Sudánseñal WOWobservatorio Vera Rubin5 sigma
Factor valle interpretaciones delicadas
Con
0:000:301:001:302:002:303:003:42
Francis Villatoro explica la dificultad de interpretar los resultados estadísticos, contrastando su relativa sencillez en los cálculos con la delicadeza necesaria para su interpretación.
…El factor de Bayes es una cosa que depende muchísimo de lo que hayas hecho y cómo lo hayas hecho y depende de tu problema porque depende fundamentalmente de la realidad de las prioridades a priori. Entonces, y las prioridades a priori, si las puedes estimar De manera independiente, sí te pueden empezar a dar cosas que tú puedas interpretar fácilmente. Porque lo complicado de la estadística es siempre la interpretación; la estadística desde el punto de vista de los cálculos es relativamente sencilla. Pero interpretar los resultados estadísticos es muy delicado. Entonces, cuando tú coges solamente el factor de valles, pues tú tienes, yo que sé, esta gente del artículo del dimetil sulfuro tenía un factor de valles, creo que era como 17; 17 es el máximo. Ese factor de Valles 17, tú dices, pues tengo un factor de Valles 17 y la gente te dirá, los periodistas te dirán: pues ¿y eso qué es? ¿Es mucho? ¿Es poco? Pues 17 tiene que ser muchísimo, porque lo digo yo y lo voy a publicar. Es una muy buena revista, pero de verdad es mucho. Entonces la gente está ahora acostumbrada, pues al valor P, pero el valor P tiene la lacra de que ha sido mal usado, sobre todo en biomedicina y que a nivel de periodismo científico ahora mismo está muy derostado, ¿no? El P-hacking, ¿no? El problema del valor P es que, bueno, yo tengo software que meto en mis datos y bajo una serie de…
Significado #2 · Palabras #1
Héctor Socas anuncia los temas principales de la siguiente sección del programa: terraformación planetaria, sigmas, factores de valles, la señal WOW y las primeras imágenes del observatorio Vera Rubin.
Habla: Héctor SocasSignificado #18 · Palabras #12sigmas factores de valles…Gracias por acompañarnos; esto es Coffee Break, Señal y Ruido, nuestra tertulia de cada semana sobre la actualidad de la ciencia. Hoy seguiremos hablando de terraformación planetaria, de sigmas y factores de valles, de la señal WOW y sobre todo de las primeras imágenes del observatorio Vera Rubin. Un nuevo observatorio astronómico que va a revolucionar la astrofísica de las próximas décadas, todo eso en un momentillo. Les quiero recordar que tenemos Una página web que es señalirruido.com; ahí pueden encontrar todos los episodios anteriores y todos los papers, todos los artículos que comentamos cada semana; todas las referencias que tratamos ahí está si quieren profundizar, ampliar información está en esa…
Francis Villatoro critica la práctica de algunos astrónomos, especialmente los exoplanetarios, al expresar el factor de valles como si fueran valores simas frecuentistas.
Habla: Francis VillatoroSignificado #4 · Palabras #11factor de valles exoplanetariosvalores simas frecuentistas francisciencia correcta francis villatoro…todo y cómo con qué cariño está hecho cada detalle. Es bonita, es bonita, es simpática, es una película muy simpática y bueno, sí, que nadie tenga así grandes expectativas, pero es simpática. Sí, sí. Bueno, el resumen, el astra que empieza, los astrónomos. Y en particular los exoplanetarios tienen el hábito curioso de expresar el factor de valles como si fueran valores simas frecuentistas y esto obviamente es completamente innecesario y obviamente no se debe hacer. Es algo, es una recomendación completamente desviada de lo que es la ciencia correcta. Pero es que no está exagerando Francis, es que es básicamente las palabras que usa. El problema que tiene el uso de la estadística bayesiana, bayesiana, es que, pero en español se dice bayesiana, se dice bayes, es la pronunciación original, ¿lo veis que es así? Sí, el problema de la estadística bayesiana es que permite hacer una serie de…
Francis Villatoro explica cómo se perciben los resultados de un análisis estadístico con diferentes niveles de significancia, contrastando ejemplos de 5 y 12 sigmas.
Habla: Francis VillatoroSignificado #16análisis estadístico niveles significanciafigura vista oyente cinco sigmasdoce sigmas super evidentes…coger el destornillador eléctrico y pegarle al clavo, o sea, no tiene sentido hacer eso, pues esto es lo mismo. Nosotros en este podcast, rara vez pero alguna vez hemos hablado de estos artículos que tienen 12 sigmas, 12 sigmas de evidencia de una barbaridad. 5 sigmas es una cosa que se ve a vista, que cualquier oyente lo ve en la figura; yo le enseño la figura y lo ve, lo tiene que ver, no puede haber ningún oyente que vea la figura y no lo vea si son 5 sigmas. 12 sigmas es súper evidente. Tú tienes un plátano y una naranja, y te dices: este plátano es igual que la naranja, y cualquier otro oyente dirá: no. Un oyente puede confundir un pomelo con una naranja, y eso ya son pues tres sismas, o sea, puede confundir una... Buenísimo, ¿a cuántos…
Francis Villatoro explica cómo los análisis bayesianos pueden generar factores de Bayes significativos incluso cuando las probabilidades a priori son extremadamente bajas.
Habla: Francis VillatoroPalabras #10análisis bayesianos factores de bayeshipótesis alternativa probabilidad 10 a la menos 14factor de valles 10 a la 6probabilidad días menos 8 hipótesis nula…claro, sí, exacto. pero que 5 sigmas y a partir de 5 sigmas todo tiene que ser muy obvio, tiene que ser muy torpe y cuando tú pones una figura en la que cualquiera que lo ve, un científico lo ve y no ve nada, es que hay años y 5 sigmas, pero claro, ahora Con los análisis, este tipo de análisis bayesianos te da un factor de valles muy grande, porque claro tú dices: si mi probabilidad de la hipótesis alternativa es 10 a la menos 14, yo puedo tener un factor de valles de 10 a la 6, de un millón pero eso me autoriza, me dice que la probabilidad que eran días menos 14 se convierte en días menos 8, sigue siendo absolutamente irrelevante. Es correcta la hipótesis nula, o Sea, eso es clave la buena estimación de las probabilidades a priori. Entonces, lo que pasa es que se ha puesto de costumbre y ya está permeando toda la ciencia; ya todo el mundo usa este tipo de contraste de hipótesis bayesiana sin ningún tipo de rigor, pero…
Francis Villatoro critica a astrónomos y científicos por usar un método ('nórdago') para evaluar factores de Bayes, reconociendo que la comparación entre estos factores es problemática debido a errores en su cálculo.
Habla: Francis VillatoroSignificado #6 · Palabras #6factor valle astrónomos científicosmétodo nórdago factores bayescálculo factor valle con el culo…mismo análisis te puede reivindicar una sustancia sí, otra no. Y después esta gente lo que hace es poner 80, 100, 500 sustancias y elige las que tienen el factor de vallas más grande. Eso no tiene absolutamente ni pies ni cabeza. Después de mitad estadístico. Entonces lo que nos dice, lo que nos critica de Vickieping es que los astrónomos, y ya os digo muchos científicos, se han ido a lo grande. Han dicho: voy a dar un nórdago; y han decidido que eso del factor de Valle suena muy mal, suena muy mal. Tengo un factor de Valle de 21, tengo un factor de Valle de 3, tengo un factor de Valle de 80. Entonces cuando tú repites un análisis en circunstancias similares pues puedes más o menos comparar los factores de Valle, pero ya os digo en general la comparación de factores de Valle está fallida porque el cálculo del factor de Valle se ha hecho con el culo. Pero bueno, asumiendo que son números, pues obviamente el número Más grande Francis, una pregunta por aclararme yo con esto de Bayesiano: el factor de Bayes al final es cómo de más favorecida está tu hipótesis después de que yo he metido estos datos nuevos que tengo. Por lo tanto, que sea grande en principio es bueno, pero…
Francis Villatoro explica que la interpretación del factor de Bayes como un indicador de la relación entre las probabilidades de dos hipótesis solo es posible en casos muy específicos y con modelos estadísticos concretos.
Habla: Francis VillatoroSignificado #12 · Palabras #5factor de bayes moneda trucadahipótesis alternativa diez veces más fuerteconocimiento a priori hipótesis nulaprobabilidad del 90 hipótesis nulafactor bayes hipótesis estadísticasmodelos estadísticos concretofactor bayes aplicabilidad limitadafactor 10 fluctuación estadísticaanálisis frecuentista comparación necesaria…tienes que multiplicar la probabilidad a priori para obtener la probabilidad a posteriori. Digo entre comillas porque como no tienes probabilidad a priori, nunca multiplicas para calcular la posteriori. Entonces te quedas con ese número. La trampa un poquito. De esto es que si yo estoy, por ejemplo, contrastando las dos hipótesis de que mi moneda está trucada frente a la moneda es justa y me sale un factor de Valles 10, quiere decir que es 10 veces más fuerte sin tener a priori, o sea, suponiendo que a priori son, que yo no tengo conocimiento a priori para preferir una sobre la otra. Si me sale el factor de Valles 10, quiere decir que a priori es 10 veces más fuerte la hipótesis alternativa que la hipótesis nula. Otra cosa es que a lo mejor la hipótesis nula tiene una probabilidad del 90% con lo cual ya no tiene mucho sentido ir mucho más allá. Esa es una interpretación extremadamente delicada. Lo que acaba de decir Héctor es una cosa que se puede hacer solamente en casos muy particulares, con unos modelos estadísticos muy concretos. Bajo una enorme cantidad de hipótesis matemáticas, se puede interpretar que el factor de Bayes describe bien el cociente de probabilidades de ambas hipótesis. O sea, en los casos normales en los que se aplica es absolutamente inaplicable. Entonces, un factor de 10 puede ser nada, puede ser algo completamente no significativo, algo puramente flutuación estadística, o puede ser un factor de valles de 10; puede ser una señal tipo 5 sismas. O sea, es que depende del problema y de lo que tú hayas hecho, de muchos detalles. Y tú lo sabes cuando haces el análisis frecuentista y lo comparas con el frecuentista, pero si no, no lo sabes. Entonces, tienes un número y hay gente que publica un número, 214. ¡Oh! Esto es con absoluta seguridad, descubrimiento. Y para ese caso particular, 214 es nada. Es fructación estadística. y hay casos en los que 1,2 es equivalente a 5 sigmas. El factor de…
Francis Villatoro explica la dificultad de interpretar los resultados estadísticos, contrastando su relativa sencillez en los cálculos con la delicadeza necesaria para su interpretación.
Habla: Francis VillatoroSignificado #2 · Palabras #1factor de valles artículo dimetilsulfurointerpretación resultados estadísticos delicadacálculos estadística relativamente sencillafactor de valles 17 publicaciónvalor p periodistas interpretaciónrevistas científicas factor bayes…El factor de Bayes es una cosa que depende muchísimo de lo que hayas hecho y cómo lo hayas hecho y depende de tu problema porque depende fundamentalmente de la realidad de las prioridades a priori. Entonces, y las prioridades a priori, si las puedes estimar De manera independiente, sí te pueden empezar a dar cosas que tú puedas interpretar fácilmente. Porque lo complicado de la estadística es siempre la interpretación; la estadística desde el punto de vista de los cálculos es relativamente sencilla. Pero interpretar los resultados estadísticos es muy delicado. Entonces, cuando tú coges solamente el factor de valles, pues tú tienes, yo que sé, esta gente del artículo del dimetil sulfuro tenía un factor de valles, creo que era como 17; 17 es el máximo. Ese factor de Valles 17, tú dices, pues tengo un factor de Valles 17 y la gente te dirá, los periodistas te dirán: pues ¿y eso qué es? ¿Es mucho? ¿Es poco? Pues 17 tiene que ser muchísimo, porque lo digo yo y lo voy a publicar. Es una muy buena revista, pero de verdad es mucho. Entonces la gente está ahora acostumbrada, pues al valor P, pero el valor P tiene la lacra de que ha sido mal usado, sobre todo en biomedicina y que a nivel de periodismo científico ahora mismo está muy derostado, ¿no? El P-hacking, ¿no? El problema del valor P es que, bueno, yo tengo software que meto en mis datos y bajo una serie de…
Francis Villatoro explica la posibilidad de transformar el factor de Bayes en un valor P, pero enfatiza que esto requiere un modelado muy detallado y un conocimiento exhaustivo de las probabilidades a priori y la distribución estadística.
Habla: Francis VillatoroPalabras #18factor bayes en valor pmodelado exquisito factor bayesprobabilidades a priori distribución estadísticacontrol absoluto probabilidades a priori…y dice: no, perdón, usted no puede interpretar así, usted tiene que verá condicionado a los parámetros, a lo que se ha hecho; es que usted no sabe, pues búsquese a alguien que sepa, pero eso no, búscame a alguien que sepa. Yo soy un catedrático de cirugía. Entonces, lo que se ha hecho es, ¿se puede convertir el factor de valles en un valor P? Pues sí, se puede convertir, pero requiere un modelado exquisito de todo, ¿vale? Se puede convertir sabiendo cómo son las probabilidades a priori, qué distribución estadística tienen, cómo va todo, o sea, tienes que tener un control absoluto de eso. Entonces lo que Se hizo en Astronomía, que bueno; se publicó un artículo muy famoso de Astronomía, pues es un análisis de este tipo con un modelo extremadamente simplificado. Es un modelo muy, muy simplificado; se lo publicó Selke y varios colaboradores en 2001, entonces en…
Francis Villatoro explica que posee una fórmula para convertir factores de valle en valores P, aunque esta solo funciona en casos muy específicos y simplificados.
Habla: Francis VillatoroSignificado #8 · Palabras #15fórmulas europeas factores de valleenanas blancas fórmulas distintasproblema planetario distribuciones tipofórmula factor valle valor panálisis bayesiano problemas jugueteproblema juguete nadie complicarse…una fórmula que es un programa de ordenador muy complicado que te estima valor P. Pero eso no lo ha hecho nadie, porque en estadística nadie se atreve a hacer esas barbaridades, aunque se podría hacer, no parece muy complicado. Pero tiene que ser caso a caso. Para este problema concreto, eso planetario de amor, que yo espero que las distribuciones sean de este tipo. Yo hago mi fórmula correspondiente para estimar la europea a partir del factor de valle. Pero para otro problema distinto, estoy con esas enanas blancas y estoy haciendo no sé qué, tengo que hacer una fórmula completamente distinta e incluso para diferentes experimentos, entre comillas, observaciones diferentes, análisis diferentes, observaciones. Con un cierto objeto, tengo que hacer un análisis específico diferente y eso no se hace, ¿vale? O sea, eso no se hace. Tengo una fórmula, tengo una fórmula, señores, tengo una fórmula que me convierte el factor de Valle en un valor P, pero esta fórmula, repito, solo funciona en caso muy, muy concreto; extremadamente de juguete, tan de juguete que para el problema este de juguete nadie calcularía, haría un análisis bayesiano, porque se ve directamente a vista, no hay que complicarse la vida; es un problema extremadamente de juguetes, pero no, se usa esta fórmula y lo que pasa. Es que el valor P no se lo puede contar a un periodista, porque si se lo cuentas a un periodista, el periodista te dice: ya estás con el pez aquí, me quieres engañar; los biomédicos me llevan engañando toda la vida con eso. No, no, no, el valor P no se lo…
Francis Villatoro advierte sobre la necesidad de precaución al convertir datos a Sigma, una práctica recomendada por David Kipping. Señala que incluso con ligeras variaciones en los algoritmos de análisis, se pueden obtener factores de Valle significativamente diferentes.
Habla: Francis VillatoroSignificado #1 · Palabras #2conversiones sigma david kippingfactor valle interpretaciones delicadasalgoritmos análisis variaciones factor valle…y estos datos se ajustan perfectamente por una línea recta, horizontal, pues entonces, no hay nada, ahora te ponen una pared olla de, wow, que sube, baja, no sé qué, y dicen, este piquito de aquí, una cosa ancha, debajo menos esta línea, no sé qué, o sea, hay que tener mucho cuidado con este tipo de conversiones a Sigma y lo recomienda David Kipping y ven que es que se deje de usar, es decir, si quieres seguir usando la misma deciano, que ya repito, repito, creo que he intentado aclararlo, hay que usarlo con muchísimo cuidado porque es muy sutil y las interpretaciones del factor de Valle son extremadamente delicadas o sea que dos artículos que usen los mismos datos con pequeñas variaciones en el algoritmo de análisis pueden dar factores de Valle completamente diferentes Pero factores 80 y 3 y eso no significa que el que ha hecho el 80 sus pequeños parámetros en el análisis son más adecuados y ese es el bueno. No, probablemente el bueno puede que sea el otro porque 80 es demasiado, 80 sin más es una cosa que…
Héctor Socas explica diferentes métodos para convertir factores de Valles y los problemas asociados a cada uno, incluyendo la dificultad de definir la transición entre evidencia regular y buena evidencia.
Habla: Héctor SocasSignificado #10 · Palabras #7factor de valles evidencia regulartransición evidencia regulero buenaanálisis madhu sudán factor 17reporte factor de valles punto…de vender grandes noticias a un análisis. Si los periodistas empiezan a criticar ese uso, pues probablemente muchos científicos acaben dejando de usarlo. Sí, ellos dicen que hay diferentes formas de hacer esa conversión, una de ellas es un método que es un poco a ojímetro, que se dice, si el factor de valles es de tanto a tanto, entonces tienes buena evidencia Si es de tanto a tanto a otro, entonces hay evidencia regular, claro, se tiene el problema de que ahí en las fronteras, cómo pasas de regulero a buena evidencia, qué significa eso en términos de descubrimiento pero bueno, entonces al final hay diferentes formas y dice, bueno, cada uno tiene sus problemas, nosotros recomendamos que no se haga ninguna conversión, que no se haga, exactamente, se reporte el factor de valles y punto, se diga, con el caso de Madhu Sudán, hemos hecho, y colaboradores, hemos hecho este análisis y nos ha salido un factor de valles de 17, en este caso, pues ya está, y que es el factor de valles y punto, Es lo que ellos recomiendan, ¿no? Bueno, está muy simpático en los keywords, por cierto; uno de ellos es de Princess Bride, la Princesa Prometida, sí, y el blues valleciano también; es el otro, puede ser la tristeza valleciana o la música blues valleciana.…