Búsqueda · 23 momentos en 10 episodios
Alberto ApariciBorja TosarHéctor SocasGastón GiribetFrancis Villatorofactor bayes en valor pmodelado exquisito factor bayesprobabilidades a priori distribución estadísticacontrol absoluto probabilidades a priorifactor bayes valor p selkeartículo astronomía selke colaboradoresmodelo simplificado astronomíafactor de Bayesvalor PFrancis VillatoroAstronomíaSelkeBikipiHéctor Socasfactor de VallesBayesianoAlberto Aparici5 sigmafactor de Valle
Factor bayes cota superior valor P
Con
0:000:301:001:302:002:303:003:42
Francis Villatoro explica la posibilidad de transformar el factor de Bayes en un valor P, pero enfatiza que esto requiere un modelado muy detallado y un conocimiento exhaustivo de las probabilidades a priori y la distribución estadística.
…y dice: no, perdón, usted no puede interpretar así, usted tiene que verá condicionado a los parámetros, a lo que se ha hecho; es que usted no sabe, pues búsquese a alguien que sepa, pero eso no, búscame a alguien que sepa. Yo soy un catedrático de cirugía. Entonces, lo que se ha hecho es, ¿se puede convertir el factor de valles en un valor P? Pues sí, se puede convertir, pero requiere un modelado exquisito de todo, ¿vale? Se puede convertir sabiendo cómo son las probabilidades a priori, qué distribución estadística tienen, cómo va todo, o sea, tienes que tener un control absoluto de eso. Entonces lo que Se hizo en Astronomía, que bueno; se publicó un artículo muy famoso de Astronomía, pues es un análisis de este tipo con un modelo extremadamente simplificado. Es un modelo muy, muy simplificado; se lo publicó Selke y varios colaboradores en 2001, entonces en un artículo relativamente largo, pues planteaban: ¿Cómo puedo convertir mi factor de Bayes en un valor p? Y dijeron: bueno, pues para hacer eso vamos a suponer que la distribución de probabilidad de mi problema es univariable y corresponde a una única variable y que la hipótesis nula es que esa variable vale cero y la hipótesis alternativa que no vale cero. Eso…
Significado #1 · Palabras #6
Francis Villatoro explica una desventaja de la estadística bayesiana mal aplicada, comparándola con las técnicas frecuentistas para el contraste de hipótesis.
Habla: Francis VillatoroSignificado #16contraste de hipótesis frecuentistavalor p análisis estadísticahipótesis nula alternativa bayesianasoftware para contraste hipótesis…para que los oyentes tengan en mente eso, o sea, la diferencia entre un contraste de hipótesis basado en estadística bayesiana y una probabilidad frecuentista de cuánto de probabilidad es que ocurra algo. Y aquí un punto también importante, y eso quizás es Uno de los grandes defectos que tiene la estadística bayesiana mal hecha: El contraste de hipótesis se puede hacer de manera frecuentista, con técnicas, y hay software muy bueno, y se ha hecho toda la vida con técnicas frecuentistas. Y obtengo un valor P, obtengo si quieres un número de sismas, y hago un análisis, tengo mi hipótesis nula, mi hipótesis alternativa, y tengo unas técnicas que me permiten, pues en función de las distribuciones esperadas de probabilidad de los datos, etc. Es decir, te puedo tener un modelo, contrasto esa hipótesis en base a un modelo y obtengo el valor P. o el número de sismas de confianza estadística de la hipótesis nula y de la hipótesis alternativa Lo que ha ocurrido con el mundo bayesiano es que han empezado a usarse las herramientas bayesianas para hacer cosas que nadie nunca hizo con herramientas…
Francis Villatoro corrige una afirmación anterior y explica que un análisis bayesiano requiere una buena estimación de las probabilidades a priori para que el factor de Bayes tenga sentido.
Habla: Francis VillatoroSignificado #11análisis bayesiano requiere prioridades a priorifactor de bayes multiplica prioridades a prioriprioridades a posteriori dependen de francis…que además tiene metano, que además tiene dióxido de carbono, que además puede modelar con un modelo muy sencillo, atmosférico, que solo tiene en cuenta tres sustancias, que además, no, no, no, pero todo esto implica que la probabilidad es del 50%, ¿vale? Mi hipótesis es que no sea todo eso vale como cara o cruz. Perdona, no, eso no es así. Eso no es hacer un buen análisis bayesiano; entonces el factor de Bayes, que es el que me multiplica las prioridades a priori de ambas hipótesis para darme las prioridades a posteriori, no tiene sentido si tú no tienes una muy buena estimación de las prioridades a priori, Francis. ¿Una pregunta? Eso es la hipótesis bayesciano y el contraste de hipótesis bayesciano de toda la vida, el que viene en los libros de texto, el que se estudia en primer curso de estadística Francis, una pregunta, a ver si tú me lo puedes aclarar A mí siempre me dijeron, sobre…
Francis Villatoro explica cómo los análisis bayesianos pueden generar factores de Bayes significativos incluso cuando las probabilidades a priori son extremadamente bajas.
Habla: Francis VillatoroSignificado #9análisis bayesianos factores de bayeshipótesis alternativa probabilidad 10 a la menos 14factor de valles 10 a la 6probabilidad días menos 8 hipótesis nula…claro, sí, exacto. pero que 5 sigmas y a partir de 5 sigmas todo tiene que ser muy obvio, tiene que ser muy torpe y cuando tú pones una figura en la que cualquiera que lo ve, un científico lo ve y no ve nada, es que hay años y 5 sigmas, pero claro, ahora Con los análisis, este tipo de análisis bayesianos te da un factor de valles muy grande, porque claro tú dices: si mi probabilidad de la hipótesis alternativa es 10 a la menos 14, yo puedo tener un factor de valles de 10 a la 6, de un millón pero eso me autoriza, me dice que la probabilidad que eran días menos 14 se convierte en días menos 8, sigue siendo absolutamente irrelevante. Es correcta la hipótesis nula, o Sea, eso es clave la buena estimación de las probabilidades a priori. Entonces, lo que pasa es que se ha puesto de costumbre y ya está permeando toda la ciencia; ya todo el mundo usa este tipo de contraste de hipótesis bayesiana sin ningún tipo de rigor, pero…
Francis Villatoro explica que, a pesar de ser consciente de las limitaciones del análisis bayesiano y de cómo algunos lo aplican incorrectamente, también va a realizarlo.
Habla: Francis VillatoroSignificado #13análisis bayesiano factor de bayeshipótesis nula modelo predichofrancis villatoro análisis bayesiano…unidad; entonces eso automáticamente destruye la ley de Valle Cielo y lo tira a la basura, pero no, no, no, no lo puedo hacer porque hay una serie de artículos muy famosos que han sido citados miles de veces que dicen que eso se hace, hay gente que lo hace. Hay gente que lo hace, yo también lo voy a hacer; ¿por qué no? Y entonces la gente empieza a hacerlo, entonces todo el análisis bayesiano se convierte en estimar lo que llaman el factor de Bayes, el cociente de la probabilidad de que con los datos, los datos que yo tengo, se ajusten a el modelo predicho por la hipótesis nula o al Modelo predicho por la hipótesis alternativa. Y ya os digo, en muchos casos se plantean modelos distintos, cuando en realidad el único modelo que debe existir es el de la hipótesis nula; estadísticamente solo la hipótesis nula tiene modelo y lo que tú…
Alberto Aparici responde a una pregunta de Francis Villatoro sobre la interpretación del factor de Bayes en análisis bayesianos.
Habla: Alberto ApariciSignificado #18 · Palabras #16factor bayes hipótesis favorecidaanálisis bayesianos datos nuevosfrancis villatoro factor de bayes…pues puedes más o menos comparar los factores de Valle, pero ya os digo en general la comparación de factores de Valle está fallida porque el cálculo del factor de Valle se ha hecho con el culo. Pero bueno, asumiendo que son números, pues obviamente el número Más grande Francis, una pregunta por aclararme yo con esto de Bayesiano: el factor de Bayes al final es cómo de más favorecida está tu hipótesis después de que yo he metido estos datos nuevos que tengo. Por lo tanto, que sea grande en principio es bueno, pero eso no quiere decir que sea súper probable; ahí está el detalle. Exactamente, el teorema de Bayes, el producto de la probabilidad condicionada de que los datos con la hipótesis Probando de la hipótesis 1, se multiplica por la probabilidad, esa probabilidad se multiplica por la probabilidad de la hipótesis 1 o que vengan de…
Francis Villatoro explica que el factor de Bayes es simplemente un cociente que indica cuánto se ha mejorado una probabilidad, y que no incluye las probabilidades a priori.
Habla: Francis VillatoroSignificado #4 · Palabras #11factor bayes mejora probabilidadprobabilidad a posteriori multiplicaciónfrancis villatoro explica factor bayesfactor de bayes moneda trucadahipótesis alternativa diez veces más fuerteconocimiento a priori hipótesis nulaprobabilidad del 90 hipótesis nulafactor bayes hipótesis estadísticasmodelos estadísticos concretofactor bayes aplicabilidad limitadafactor 10 fluctuación estadísticaanálisis frecuentista comparación necesariafactor bayes análisis específicoprobabilidades a priori problemaprioridades a priori estimables…entre la suma de ambas probabilidades Aquí como es equidistribuido, pues pongo que las probabilidades iniciales, a priori, son iguales pues lo que tengo en el determinador es una constante, pues es irrelevante, entonces lo único que tengo es esa probabilidad Pero el factor de Bayes no lleva los a priori, o sea, el factor de Bayes es solo el cociente. El cociente es por lo que está multiplicando. Es solo cuánto han mejorado. Exactamente, entre comillas, cuánto tienes que multiplicar la probabilidad a priori para obtener la probabilidad a posteriori. Digo entre comillas porque como no tienes probabilidad a priori, nunca multiplicas para calcular la posteriori. Entonces te quedas con ese número. La trampa un poquito. De esto es que si yo estoy, por ejemplo, contrastando las dos hipótesis de que mi moneda está trucada frente a la moneda es justa y me sale un factor de Valles 10, quiere decir que es 10 veces más fuerte sin tener a priori, o sea, suponiendo que a priori son, que yo no tengo conocimiento a priori para preferir una sobre la otra. Si me sale el factor de Valles 10, quiere decir que a priori es 10 veces más fuerte la hipótesis alternativa que la hipótesis nula. Otra cosa es que a lo mejor la hipótesis nula tiene una probabilidad del 90% con lo cual ya no tiene mucho sentido ir mucho más allá. Esa es una interpretación extremadamente delicada. Lo que acaba de decir Héctor es una cosa que se puede hacer solamente en casos muy particulares, con unos modelos estadísticos muy concretos. Bajo una enorme cantidad de hipótesis matemáticas, se puede interpretar que el factor de Bayes describe bien el cociente de probabilidades de ambas hipótesis. O sea, en los casos normales en los que se aplica es absolutamente inaplicable. Entonces, un factor de 10 puede ser nada, puede ser algo completamente no significativo, algo puramente flutuación estadística, o puede ser un factor de valles de 10; puede ser una señal tipo 5 sismas. O sea, es que depende del problema y de lo que tú hayas hecho, de muchos detalles. Y tú lo sabes cuando haces el análisis frecuentista y lo comparas con el frecuentista, pero si no, no lo sabes. Entonces, tienes un número y hay gente que publica un número, 214. ¡Oh! Esto es con absoluta seguridad, descubrimiento. Y para ese caso particular, 214 es nada. Es fructación estadística. y hay casos en los que 1,2 es equivalente a 5 sigmas. El factor de Bayes es una cosa que depende muchísimo de lo que hayas hecho y cómo lo hayas hecho y depende de tu problema porque depende fundamentalmente de la realidad de las prioridades a priori. Entonces, y las prioridades a priori, si las puedes estimar De manera independiente, sí te pueden empezar a dar cosas que tú puedas interpretar fácilmente. Porque lo complicado de la estadística es siempre la interpretación; la estadística desde el punto de vista de los cálculos es relativamente sencilla. Pero…
Francis Villatoro comenta sobre cómo los periodistas interpretan los factores de Bayes, ejemplificando con un valor de 17 y anticipando que lo considerarían significativo para su publicación.
Habla: Francis VillatoroPalabras #5factor de valles 17 publicaciónvalor p periodistas interpretaciónrevistas científicas factor bayes…Pero interpretar los resultados estadísticos es muy delicado. Entonces, cuando tú coges solamente el factor de valles, pues tú tienes, yo que sé, esta gente del artículo del dimetil sulfuro tenía un factor de valles, creo que era como 17; 17 es el máximo. Ese factor de Valles 17, tú dices, pues tengo un factor de Valles 17 y la gente te dirá, los periodistas te dirán: pues ¿y eso qué es? ¿Es mucho? ¿Es poco? Pues 17 tiene que ser muchísimo, porque lo digo yo y lo voy a publicar. Es una muy buena revista, pero de verdad es mucho. Entonces la gente está ahora acostumbrada, pues al valor P, pero el valor P tiene la lacra de que ha sido mal usado, sobre todo en biomedicina y que a nivel de periodismo científico ahora mismo está muy derostado, ¿no? El P-hacking, ¿no? El problema del valor P es que, bueno, yo tengo software que meto en mis datos y bajo una serie de…
Francis Villatoro explica la posibilidad de transformar el factor de Bayes en un valor P, pero enfatiza que esto requiere un modelado muy detallado y un conocimiento exhaustivo de las probabilidades a priori y la distribución estadística.
Habla: Francis VillatoroSignificado #1 · Palabras #6factor bayes en valor pmodelado exquisito factor bayesprobabilidades a priori distribución estadísticacontrol absoluto probabilidades a priorifactor bayes valor p selkeartículo astronomía selke colaboradoresmodelo simplificado astronomía…y dice: no, perdón, usted no puede interpretar así, usted tiene que verá condicionado a los parámetros, a lo que se ha hecho; es que usted no sabe, pues búsquese a alguien que sepa, pero eso no, búscame a alguien que sepa. Yo soy un catedrático de cirugía. Entonces, lo que se ha hecho es, ¿se puede convertir el factor de valles en un valor P? Pues sí, se puede convertir, pero requiere un modelado exquisito de todo, ¿vale? Se puede convertir sabiendo cómo son las probabilidades a priori, qué distribución estadística tienen, cómo va todo, o sea, tienes que tener un control absoluto de eso. Entonces lo que Se hizo en Astronomía, que bueno; se publicó un artículo muy famoso de Astronomía, pues es un análisis de este tipo con un modelo extremadamente simplificado. Es un modelo muy, muy simplificado; se lo publicó Selke y varios colaboradores en 2001, entonces en un artículo relativamente largo, pues planteaban: ¿Cómo puedo convertir mi factor de Bayes en un valor p? Y dijeron: bueno, pues para hacer eso vamos a suponer que la distribución de probabilidad de mi problema es univariable y corresponde a una única variable y que la hipótesis nula es que esa variable vale cero y la hipótesis alternativa que no vale cero. Eso…
Francis Villatoro explica cómo los astrónomos utilizan una relación inversa para calcular factores de Bayes y estimar una cota superior al valor P.
Habla: Francis VillatoroSignificado #2 · Palabras #1factor bayes hipótesis nulavalor p logaritmo de pastronomía fórmula inversa bayesfactor bayes cota superior valor phipótesis nula denominador hipótesis alternativarelación inversa astronomía factores bayes…eso no ocurre nunca: el monotón ya no se cumple nunca, no pasa nada. Tengo que suponer además que tengo que tener una serie de propiedades matemáticas muy concretas y bajo estas condiciones muy concretas yo tengo una fórmula que me estima el factor. De Bayes como mayor o igual que una cierta expresión matemática que depende del valor P. Es la menos exponencial del valor P por el logaritmo de P, entonces yo tengo ese factor de Bayes de la hipótesis nula dividido entre la hipótesis alternativa, mayor o igual que este cociente. En casi todos los estudios en astronomía se utiliza lo contrario, no se usa el factor de Bayes de arriba en el numerador, la hipótesis nula. Sino al contrario, la hipótesis nula en el denominador y la hipótesis alternativa en el numerador. Con lo que el signo de la igualdad se invierte, con lo que en astronomía se usa la relación contraria. Yo tengo mi factor de Bayes, me permite esta fórmula estimar una cota superior a el valor P. Esta fórmula tiene una serie de condiciones y, en rigor estadístico, habría que verificar que en tu problema se cumplen. Si en tu problema alguna de estas hipótesis no se cumple, en astronomía no se cumple ninguna nunca, pero bueno, si en tu problema alguna…
Francis Villatoro explica cómo puede transformar un factor de Bayes en un valor P y luego invertir este último para obtener sigmas, aunque reconoce la necesidad de un modelo estadístico específico para esta inversión.
Habla: Francis VillatoroSignificado #3 · Palabras #3fórmula factor valle valor panálisis bayesiano problemas jugueteproblema juguete nadie complicarsevalor p y periodistas biomédicossigmas como alternativa al valor pdesconfianza periodista campo biomédicoengaño común sector biomédicofactor bayes valor p sigmasinversión valor p modelo estadísticodistribución cauciana sigmas…para otro problema distinto, estoy con esas enanas blancas y estoy haciendo no sé qué, tengo que hacer una fórmula completamente distinta e incluso para diferentes experimentos, entre comillas, observaciones diferentes, análisis diferentes, observaciones. Con un cierto objeto, tengo que hacer un análisis específico diferente y eso no se hace, ¿vale? O sea, eso no se hace. Tengo una fórmula, tengo una fórmula, señores, tengo una fórmula que me convierte el factor de Valle en un valor P, pero esta fórmula, repito, solo funciona en caso muy, muy concreto; extremadamente de juguete, tan de juguete que para el problema este de juguete nadie calcularía, haría un análisis bayesiano, porque se ve directamente a vista, no hay que complicarse la vida; es un problema extremadamente de juguetes, pero no, se usa esta fórmula y lo que pasa. Es que el valor P no se lo puede contar a un periodista, porque si se lo cuentas a un periodista, el periodista te dice: ya estás con el pez aquí, me quieres engañar; los biomédicos me llevan engañando toda la vida con eso. No, no, no, el valor P no se lo cree nadie. No, no, te lo voy a dar en sigmas, yo puedo convertir el valor P en sigmas. O sea, yo puedo transformar el factor de Bayes en un valor P y ahora invertir el valor P y sacar sigmas. De nuevo, la inversión para el valor P, para sacar las sigmas, requiere un modelo estadístico concreto. En grosso modo, básicamente, que tengas una distribución cauciana, pero no tienes una distribución cauciana en ningún caso. O Sea, no puedes, o sea, una fórmula que está mal. O sea, aplicar esa fórmula no está justificado de ninguna manera y debe ser rechazada de plano aunque haya sido usada en más de 1200 artículos de astronomía exoplanetaria y astronomía normal y corriente porque…
Francis Villatoro explica cómo el factor de Bayes puede transformarse en un máximo para el valor P, lo que a su vez corresponde a un máximo para el número de sigmas.
Habla: Francis VillatoroPalabras #7máximo valor p número de sigmassigma hacking artículo bikipidimetilsulfuro tres sigmas observaciónseñal inexistente dimetilsulfuro…muy claro y el resultado final es que se están publicando una enorme cantidad de artículos que convierten el factor de Bayes en un número de sigmas y que casi están sugiriendo que el factor de Bayes se puede convertir en una estimación del mínimo de sigmas. Cuando, en realidad, lo que se puede convertir es en un máximo para valor P, perdón, un mínimo para valor P que corresponde a un máximo para el número de sigmas. Bajo muchísimas hipótesis, entonces lo que este artículo de Bikipi reivindica es que la gente deje de hacer esto; que esto lo podemos bautizar como sigma hacking y que cosas esas como el artículo famoso del dimetil sulfuro que decía que habían observado dimetil sulfuro o dimetil disulfuro con al menos tres sigmas, que en realidad como mucho son tres sigmas pero casi con toda seguridad son mucho menos de una sigma; casi con toda seguridad, ahí no hay ningún tipo de señal. ¿Por qué? porque solo hay que mirar la figura si tú miras la figura y tú dices el mejor si no miras el ajuste no miras la Los datos y estos datos se ajustan perfectamente por una línea recta, horizontal, pues entonces, no hay nada, ahora te ponen una pared olla de,…
Francis Villatoro discute la interpretación de factores como '80' en análisis estadísticos, argumentando que un valor alto no implica necesariamente que el método utilizado sea superior al de otros.
Habla: Francis VillatoroPalabras #19análisis estadísticos factor 80método análisis estadístico parámetros…cuidado porque es muy sutil y las interpretaciones del factor de Valle son extremadamente delicadas o sea que dos artículos que usen los mismos datos con pequeñas variaciones en el algoritmo de análisis pueden dar factores de Valle completamente diferentes Pero factores 80 y 3 y eso no significa que el que ha hecho el 80 sus pequeños parámetros en el análisis son más adecuados y ese es el bueno. No, probablemente el bueno puede que sea el otro porque 80 es demasiado, 80 sin más es una cosa que No hay que llegar a analizarlo, o sea, es que se ve; o sea, son este tipo de cosas que es que tú enciendes la bombilla pues sabes que está encendida o está apagada, pones la foto y ya está. No tienes que hacer nada más, no tienes que escribir, me hace un…
Héctor Socas concluye la discusión anterior sobre el rigor en el uso de la estadística, enfocándose en el contenido principal del artículo mencionado por Francis Villatoro.
Habla: Héctor SocasPalabras #14factor de valles y sigmacota superior paper villatororigor estadística hector socas…del paper porque Francis ha hablado de muchas cosas; hace mucho tiempo que reivindica el rigor en el uso de la estadística y que muchas veces no está al nivel que uno esperaría y entonces creo que has hablado de muchas cosas aquí, de muchos problemas. Me gustaría por ir concluyendo poner el foco en lo que yo creo que es, en lo que se centra el paper: que al final es una cosa tan sencilla como decir que esas formulitas con recomendaciones sobre cómo convertir de factor de valles a sigma, tal como se planteó originariamente, era una cota superior. Es decir, si tú sacas tal factor de Valle y aplicas esta fórmula para sacar un sigma, eso es como mucho tantos sigmas y que por un error histórico en la propagación en la literatura se ha convertido en un al menos tantas sigmas. Es decir, que el artículo, por…
Francis Villatoro introduce una referencia más sutil al comparar métodos para estimar el número de sismas en un estudio científico, mostrando cómo la cota superior varía según el método utilizado.
Habla: Francis VillatoroPalabras #12estimación número sismascota superior método sismasproblema juguete sismasfrancis villatoro métodos estimación…Inconcebible, dice, sabes, usas mucho esa palabra, yo creo que no significa lo que tú crees que significa. Y esa, creo que es la otra referencia, que los exoplanetólogos usan mucho el sigma. Y dice Kipping, creo que no significa lo que tú crees que significa. Esa me parece que es la otra referencia, un poco más oculta. Bueno, y acá va la única figura científica que tiene el paper: es una pequeña funda en la que comparan diferentes métodos de estimar el número de sismas. La cota superior del número de sismas estimada con diferentes métodos para el mismo problema, un problema de juguete, y claro que depende del método que uses; tienes unos sismas que bailan pues entre 0,5 y 2 o entre 1,5 y 2,5, y entonces no sabes. Incluso la cota superior es una cosa que está completamente diluida: no es una cota superior, no es una línea que has puesto, sino que has puesto una banda tremenda de cota superior porque eso se puede calcular con diferentes métodos y diferentes métodos tienen un resultado distinto. Es decir, la recomendación es no se use, por favor, que dejen de usar eso y que los periodistas dejen de vender grandes noticias a un análisis. Si los periodistas empiezan a criticar ese uso, pues probablemente muchos científicos acaben dejando de usarlo. Sí,…