Héctor Socas explica cómo un error histórico en la literatura científica ha llevado a una sobreestimación de la significancia estadística, corrigiendo una interpretación errónea del artículo de Madhu Sudán y otros similares.
…foco en lo que yo creo que es, en lo que se centra el paper: que al final es una cosa tan sencilla como decir que esas formulitas con recomendaciones sobre cómo convertir de factor de valles a sigma, tal como se planteó originariamente, era una cota superior. Es decir, si tú sacas tal factor de Valle y aplicas esta fórmula para sacar un sigma, eso es como mucho tantos sigmas y que por un error histórico en la propagación en la literatura se ha convertido en un al menos tantas sigmas. Es decir, que el artículo, por ejemplo, pone el artículo de Madhu Sudán pero dice que lo mismo pasa en muchos otros artículos; dice que he obtenido una significancia de al menos tres sigmas. En realidad debería decir que como mucho es de tres sigmas. Es decir, que es una forma de acotar por todas esas hipótesis que dice Francis que están metidas en esa conversión del análisis bayesiano a las sigmas. Entonces esas hipótesis te dan que como mucho el número de sigmas que tendrías es ese y entonces ahí vienen las referencias a la Princesa Prometida: el meme. Que aparece en la figura 2, les voy a decir: es una foto para los oyentes del podcast. Es una escena de la película; recuerden que hay esa batalla de intelectos entre el héroe enmascarado y el villano inteligente Vizzini, porque en la película, sin hacer…
Héctor Socas y Borja Tosar continúan la conversación sobre el procesamiento de datos del observatorio Vera C. Rubin, mencionando una discusión previa en un grupo de WhatsApp relacionado con el proyecto Arecibo.
Habla: Héctor SocasPalabras #4grupo whatsapp proyecto arecibodavid kipping metildisulfuro k2-18bmadhu sudán planeta mini neptunoabel méndez señal wow…de esto de la terraformación, pero desde el punto de vista más ético Si te parece lo ponemos al final y así puede generar debate y tal, y si no lo retomamos en el próximo Ganímedes, ¿te parece? Me parece muy guay porque además llevo varios coffees esperando por el tema de los sigmas, que ya no es lo que era un sigma Ya no son lo que eran los sigmas, macho, es que antes veías, mira cuántos sigmas y tal, te quedabas tranquilo, ahora ya es un puto Y además está bien porque lo puedo hilar, si se acuerdan les dije que el paper este de la Señal Wow nos lo pasó Abel Méndez en este grupo de WhatsApp del proyecto Arecibo Wow pues resulta que en ese mismo grupo de Whatsapp está también David Kipping y yo les había comentado hace ya cosa de un mes o algo así estábamos hablando de este trabajo del grupo de Madhu Sudán sobre si hay metildisulfuro en el planeta este K2-18b o no hay si hay dimetildisulfuro, toda esta polémica que había habido y estuvimos discutiendo mucho toda esa polémica que había Y en este grupo de WhatsApp dijo David Kipping: dice pues espérate que estoy preparando un paper en el que hablo de un error bastante embarrassing que cometen la gente de exoplanetas. Entonces estábamos un poco esperando a ver ese paper de Kipping y tal. Pues…
Francis Villatoro explica cómo se perciben los resultados de un análisis estadístico con diferentes niveles de significancia, contrastando ejemplos de 5 y 12 sigmas.
Habla: Francis VillatoroSignificado #10análisis bayesiano sofisticadodestornillador eléctrico clavar un clavoartículos con 12 sigmas evidenciaanálisis estadístico niveles significanciafigura vista oyente cinco sigmasdoce sigmas super evidentes…este tipo de análisis, yo lo he criticado muchísimas veces; o sea, convertir las conclusiones bayesianas en conclusiones frecuentistas no tiene ningún sentido, sobre todo cuando tu modelo bayesiano es una cosa súper cutre que no tiene ni piel ni cabeza. Yo esa crítica la comparto totalmente porque parece como que lo bayesiano es más sofisticado y entonces hay gente que lo usa porque al ser más sofisticado parece como que es más guay, pero lo usa de una forma o en un contexto que no pega; o sea, vale. El destornillador eléctrico, este que funciona solo tal, es más sofisticado que un martillo, pues yo tengo que clavar un clavo, no voy a coger el destornillador eléctrico y pegarle al clavo, o sea, no tiene sentido hacer eso, pues esto es lo mismo. Nosotros en este podcast, rara vez pero alguna vez hemos hablado de estos artículos que tienen 12 sigmas, 12 sigmas de evidencia de una barbaridad. 5 sigmas es una cosa que se ve a vista, que cualquier oyente lo ve en la figura; yo le enseño la figura y lo ve, lo tiene que ver, no puede haber ningún oyente que vea la figura y no lo vea si son 5 sigmas. 12 sigmas es súper evidente. Tú tienes un plátano y una naranja, y te dices: este plátano es igual que la naranja, y cualquier otro oyente dirá: no. Un oyente puede confundir un pomelo con una naranja, y eso ya son pues tres sismas, o sea, puede confundir una... Buenísimo, ¿a cuántos…
Francis Villatoro explica cómo el factor de Bayes puede transformarse en un máximo para el valor P, lo que a su vez corresponde a un máximo para el número de sigmas.
Habla: Francis VillatoroSignificado #8 · Palabras #5máximo valor p número de sigmassigma hacking artículo bikipidimetilsulfuro tres sigmas observaciónseñal inexistente dimetilsulfuro…muy claro y el resultado final es que se están publicando una enorme cantidad de artículos que convierten el factor de Bayes en un número de sigmas y que casi están sugiriendo que el factor de Bayes se puede convertir en una estimación del mínimo de sigmas. Cuando, en realidad, lo que se puede convertir es en un máximo para valor P, perdón, un mínimo para valor P que corresponde a un máximo para el número de sigmas. Bajo muchísimas hipótesis, entonces lo que este artículo de Bikipi reivindica es que la gente deje de hacer esto; que esto lo podemos bautizar como sigma hacking y que cosas esas como el artículo famoso del dimetil sulfuro que decía que habían observado dimetil sulfuro o dimetil disulfuro con al menos tres sigmas, que en realidad como mucho son tres sigmas pero casi con toda seguridad son mucho menos de una sigma; casi con toda seguridad, ahí no hay ningún tipo de señal. ¿Por qué? porque solo hay que mirar la figura si tú miras la figura y tú dices el mejor si no miras el ajuste no miras la Los datos y estos datos se ajustan perfectamente por una línea recta, horizontal, pues entonces, no hay nada, ahora te ponen una pared olla de,…
Héctor Socas explica cómo un error histórico en la literatura científica ha llevado a una sobreestimación de la significancia estadística, corrigiendo una interpretación errónea del artículo de Madhu Sudán y otros similares.
Habla: Héctor SocasSignificado #1 · Palabras #1error histórico significancia estadísticaartículo madhu sudán tres sigmasanálisis bayesiano hipótesis francisla princesa prometida meme…foco en lo que yo creo que es, en lo que se centra el paper: que al final es una cosa tan sencilla como decir que esas formulitas con recomendaciones sobre cómo convertir de factor de valles a sigma, tal como se planteó originariamente, era una cota superior. Es decir, si tú sacas tal factor de Valle y aplicas esta fórmula para sacar un sigma, eso es como mucho tantos sigmas y que por un error histórico en la propagación en la literatura se ha convertido en un al menos tantas sigmas. Es decir, que el artículo, por ejemplo, pone el artículo de Madhu Sudán pero dice que lo mismo pasa en muchos otros artículos; dice que he obtenido una significancia de al menos tres sigmas. En realidad debería decir que como mucho es de tres sigmas. Es decir, que es una forma de acotar por todas esas hipótesis que dice Francis que están metidas en esa conversión del análisis bayesiano a las sigmas. Entonces esas hipótesis te dan que como mucho el número de sigmas que tendrías es ese y entonces ahí vienen las referencias a la Princesa Prometida: el meme. Que aparece en la figura 2, les voy a decir: es una foto para los oyentes del podcast. Es una escena de la película; recuerden que hay esa batalla de intelectos entre el héroe enmascarado y el villano inteligente Vizzini, porque en la película, sin hacer…
Héctor Socas explica cómo se ha producido una manipulación en la literatura científica al invertir los límites de significancia estadística, comparándolo con una situación humorística del 'Princess Bride Syndrome'.
Habla: Héctor SocasPalabras #16princess bride syndrome literatura científicamanipulación límites significancia estadísticacambio tres sigma literatura…momento los exoplanetólogos cambian las copas, lo que debería haber sido un límite superior lo convierten en un límite inferior y entonces dicen, tengo una detección de al menos tres sigmas, cuando realmente era de como mucho tres sigmas Lo que ha pasado en La literatura es que se ha cambiado el al menos por un como mucho, o sea al revés; lo que debería ser como mucho tres sigma lo han cambiado por al menos tres sigma. Entonces esa es el Princess Bride Syndrome; es hacer el cambio, es un poco rebuscado la verdad, pero es gracioso. Voy a hacer un único comentario ante todo esto que es ¡Inconcebible! Y esta es justamente la segunda referencia, que no recuerdo ahora dónde la vi o si se me ocurrió, no creo que se me haya ocurrido, creo que la vi en algún sitio, pero no recuerdo dónde, en el paper no la veo. Bizzini solía decir eso, que dice esto, eso es…
Héctor Socas explica diferentes métodos para convertir factores de Valles y los problemas asociados a cada uno, incluyendo la dificultad de definir la transición entre evidencia regular y buena evidencia.
Habla: Héctor SocasSignificado #15 · Palabras #9factor de valles evidencia regulartransición evidencia regulero buenaanálisis madhu sudán factor 17reporte factor de valles punto…de vender grandes noticias a un análisis. Si los periodistas empiezan a criticar ese uso, pues probablemente muchos científicos acaben dejando de usarlo. Sí, ellos dicen que hay diferentes formas de hacer esa conversión, una de ellas es un método que es un poco a ojímetro, que se dice, si el factor de valles es de tanto a tanto, entonces tienes buena evidencia Si es de tanto a tanto a otro, entonces hay evidencia regular, claro, se tiene el problema de que ahí en las fronteras, cómo pasas de regulero a buena evidencia, qué significa eso en términos de descubrimiento pero bueno, entonces al final hay diferentes formas y dice, bueno, cada uno tiene sus problemas, nosotros recomendamos que no se haga ninguna conversión, que no se haga, exactamente, se reporte el factor de valles y punto, se diga, con el caso de Madhu Sudán, hemos hecho, y colaboradores, hemos hecho este análisis y nos ha salido un factor de valles de 17, en este caso, pues ya está, y que es el factor de valles y punto, Es lo que ellos recomiendan, ¿no? Bueno, está muy simpático en los keywords, por cierto; uno de ellos es de Princess Bride, la Princesa Prometida, sí, y el blues valleciano también; es el otro, puede ser la tristeza valleciana o la música blues valleciana.…