Francis Villatoro explica cómo se perciben los resultados de un análisis estadístico con diferentes niveles de significancia, contrastando ejemplos de 5 y 12 sigmas.
…coger el destornillador eléctrico y pegarle al clavo, o sea, no tiene sentido hacer eso, pues esto es lo mismo. Nosotros en este podcast, rara vez pero alguna vez hemos hablado de estos artículos que tienen 12 sigmas, 12 sigmas de evidencia de una barbaridad. 5 sigmas es una cosa que se ve a vista, que cualquier oyente lo ve en la figura; yo le enseño la figura y lo ve, lo tiene que ver, no puede haber ningún oyente que vea la figura y no lo vea si son 5 sigmas. 12 sigmas es súper evidente. Tú tienes un plátano y una naranja, y te dices: este plátano es igual que la naranja, y cualquier otro oyente dirá: no. Un oyente puede confundir un pomelo con una naranja, y eso ya son pues tres sismas, o sea, puede confundir una... Buenísimo, ¿a cuántos…
Héctor Socas resume un paper sobre exoplanetólogos, señalando que se centra en la sobreestimación de la significancia estadística (sigmas) y que el autor lo presenta como una autocrítica de la comunidad científica.
Habla: Héctor SocasPalabras #15exoplanetólogos sobreestiman significancia sigmapaper kipping autocrítica comunidad científicarabia exoplanetólogos críticas externas…decir, como embarazoso, un error embarazoso. El artículo se titula, aparte introduce una palabra que yo creo que es nueva: exoplaneteers; que yo creo que esto no lo había oído nunca; creo que significa los exoplanetólogos, podría ser una buena traducción. Los exoplanetólogos no paran de sobreestimar la significancia de sigma, de las sigmas, y ese es el resumen del paper. Entonces, claro, aquí se mete mucho con los exoplanetólogos y lo puede hacer porque él es un exoplanetólogo. Entonces espero que la gente en el campo no se lo tome tan a la tremenda ni se ofenda tanto, porque a todos nos da rabia cuando alguien de fuera viene a decirte que haces algo mal, pero bueno, si es alguien de dentro, se toma como autocrítica; yo creo que él lo plantea como una autocrítica de la comunidad a la que él pertenece. Por lo menos, lo quiero interpretar así. Bueno, el artículo es de Kipping y Bjorn Benecke. Que me da la impresión de que él empezó a trabajar en esto y luego incorporó a Benecke en algún momento en el artículo, porque todo lo explica en la introducción; todo el tema de la confusión de la que va a hablar está conectada con otro paper de Beneke, en…
Francis Villatoro explica cómo se perciben los resultados de un análisis estadístico con diferentes niveles de significancia, contrastando ejemplos de 5 y 12 sigmas.
Habla: Francis VillatoroSignificado #1 · Palabras #9análisis estadístico niveles significanciafigura vista oyente cinco sigmasdoce sigmas super evidentes…coger el destornillador eléctrico y pegarle al clavo, o sea, no tiene sentido hacer eso, pues esto es lo mismo. Nosotros en este podcast, rara vez pero alguna vez hemos hablado de estos artículos que tienen 12 sigmas, 12 sigmas de evidencia de una barbaridad. 5 sigmas es una cosa que se ve a vista, que cualquier oyente lo ve en la figura; yo le enseño la figura y lo ve, lo tiene que ver, no puede haber ningún oyente que vea la figura y no lo vea si son 5 sigmas. 12 sigmas es súper evidente. Tú tienes un plátano y una naranja, y te dices: este plátano es igual que la naranja, y cualquier otro oyente dirá: no. Un oyente puede confundir un pomelo con una naranja, y eso ya son pues tres sismas, o sea, puede confundir una... Buenísimo, ¿a cuántos…
Francis Villatoro reflexiona sobre la importancia de plantearse preguntas relevantes en ciencia, comparando la diferencia entre una naranja para zumo y una para comer como un ejemplo de lo que podría considerarse 'menos de una sisma' en términos de significancia estadística.
Habla: Francis VillatoroSignificado #4 · Palabras #19diferencia naranja zumo mesasignificancia estadística sismafigura científica cinco sigmas…otro oyente dirá: no. Un oyente puede confundir un pomelo con una naranja, y eso ya son pues tres sismas, o sea, puede confundir una... Buenísimo, ¿a cuántos sismas está un pomelo y una naranja? Yo no creo que esto se haya planteado jamás en la historia. Claro, porque no nos planteamos las preguntas realmente importantes. Y dice, bueno, ¿y qué es menos de una sisma? Pues yo qué sé, la diferencia entre una naranja de zumo y una naranja de mesa. De mesa, claro, sí, exacto. pero que 5 sigmas y a partir de 5 sigmas todo tiene que ser muy obvio, tiene que ser muy torpe y cuando tú pones una figura en la que cualquiera que lo ve, un científico lo ve y no ve nada, es que hay años y 5 sigmas, pero claro, ahora Con los análisis, este tipo de análisis bayesianos te da un factor de valles muy grande, porque claro tú dices: si mi probabilidad de la hipótesis alternativa es 10 a la menos 14, yo puedo tener un factor de valles de 10 a la 6, de un millón pero eso me…
Francis Villatoro explica cómo el factor de Bayes puede transformarse en un máximo para el valor P, lo que a su vez corresponde a un máximo para el número de sigmas.
Habla: Francis VillatoroSignificado #14máximo valor p número de sigmassigma hacking artículo bikipidimetilsulfuro tres sigmas observaciónseñal inexistente dimetilsulfuro…muy claro y el resultado final es que se están publicando una enorme cantidad de artículos que convierten el factor de Bayes en un número de sigmas y que casi están sugiriendo que el factor de Bayes se puede convertir en una estimación del mínimo de sigmas. Cuando, en realidad, lo que se puede convertir es en un máximo para valor P, perdón, un mínimo para valor P que corresponde a un máximo para el número de sigmas. Bajo muchísimas hipótesis, entonces lo que este artículo de Bikipi reivindica es que la gente deje de hacer esto; que esto lo podemos bautizar como sigma hacking y que cosas esas como el artículo famoso del dimetil sulfuro que decía que habían observado dimetil sulfuro o dimetil disulfuro con al menos tres sigmas, que en realidad como mucho son tres sigmas pero casi con toda seguridad son mucho menos de una sigma; casi con toda seguridad, ahí no hay ningún tipo de señal. ¿Por qué? porque solo hay que mirar la figura si tú miras la figura y tú dices el mejor si no miras el ajuste no miras la Los datos y estos datos se ajustan perfectamente por una línea recta, horizontal, pues entonces, no hay nada, ahora te ponen una pared olla de,…
Héctor Socas explica cómo un error histórico en la literatura científica ha llevado a una sobreestimación de la significancia estadística, corrigiendo una interpretación errónea del artículo de Madhu Sudán y otros similares.
Habla: Héctor SocasSignificado #15 · Palabras #13error histórico significancia estadísticaartículo madhu sudán tres sigmasanálisis bayesiano hipótesis francisla princesa prometida meme…foco en lo que yo creo que es, en lo que se centra el paper: que al final es una cosa tan sencilla como decir que esas formulitas con recomendaciones sobre cómo convertir de factor de valles a sigma, tal como se planteó originariamente, era una cota superior. Es decir, si tú sacas tal factor de Valle y aplicas esta fórmula para sacar un sigma, eso es como mucho tantos sigmas y que por un error histórico en la propagación en la literatura se ha convertido en un al menos tantas sigmas. Es decir, que el artículo, por ejemplo, pone el artículo de Madhu Sudán pero dice que lo mismo pasa en muchos otros artículos; dice que he obtenido una significancia de al menos tres sigmas. En realidad debería decir que como mucho es de tres sigmas. Es decir, que es una forma de acotar por todas esas hipótesis que dice Francis que están metidas en esa conversión del análisis bayesiano a las sigmas. Entonces esas hipótesis te dan que como mucho el número de sigmas que tendrías es ese y entonces ahí vienen las referencias a la Princesa Prometida: el meme. Que aparece en la figura 2, les voy a decir: es una foto para los oyentes del podcast. Es una escena de la película; recuerden que hay esa batalla de intelectos entre el héroe enmascarado y el villano inteligente Vizzini, porque en la película, sin hacer…
Héctor Socas explica cómo se ha producido una manipulación en la literatura científica al invertir los límites de significancia estadística, comparándolo con una situación humorística del 'Princess Bride Syndrome'.
Habla: Héctor SocasPalabras #17princess bride syndrome literatura científicamanipulación límites significancia estadísticacambio tres sigma literatura…momento los exoplanetólogos cambian las copas, lo que debería haber sido un límite superior lo convierten en un límite inferior y entonces dicen, tengo una detección de al menos tres sigmas, cuando realmente era de como mucho tres sigmas Lo que ha pasado en La literatura es que se ha cambiado el al menos por un como mucho, o sea al revés; lo que debería ser como mucho tres sigma lo han cambiado por al menos tres sigma. Entonces esa es el Princess Bride Syndrome; es hacer el cambio, es un poco rebuscado la verdad, pero es gracioso. Voy a hacer un único comentario ante todo esto que es ¡Inconcebible! Y esta es justamente la segunda referencia, que no recuerdo ahora dónde la vi o si se me ocurrió, no creo que se me haya ocurrido, creo que la vi en algún sitio, pero no recuerdo dónde, en el paper no la veo. Bizzini solía decir eso, que dice esto, eso es…