¿Hay algún ejemplo en la inferencia bayesiana de que, incluso con infinitos puntos de datos, el efecto de lo anterior no puede ser “eliminado”?

Si [math] p (x) [/ math] es su previo y [math] D [/ math] es la información observada, entonces de acuerdo con la regla del producto [math] p (x | D) \ propto p (D | x) p (x) [/ matemáticas]. Esta es la inferencia bayesiana estándar en la variable aleatoria desconocida [matemáticas] x [/ matemáticas].

De ello se deduce que si [math] p (x) [/ math] es cero en algunos lugares, no importa cuán ” fuertes ” sean los datos ([math] p (D | x) [/ math]), [ matemáticas] p (x | D) [/ matemáticas] seguirá siendo cero en esos mismos lugares. Esto es lo que otro respondedor llamó un “prior dogmático”. Sin embargo, otro respondedor dio la función delta de Dirac como un ejemplo especial de esto.

La moraleja de la historia es asegurarse de que haya una masa de probabilidad distinta de cero para todos los posibles / razonables [matemática] x [/ matemática] para que, al menos en el límite, los datos puedan determinar la estimación [matemática] p (x | D) [/ matemáticas].

He visto algo en Wikipedia que se parece a esto, pero no sé los detalles:
Teorema de Bernstein-von Mises
(ver Limitaciones)

More Interesting

¿Qué significa el impulso en las redes neuronales?

¿A qué laboratorio puedo unirme en Caltech para hacer investigación de aprendizaje automático?

¿La ingeniería de características es relevante para los bosques aleatorios? ¿Cómo son relevantes las transformaciones de centrado, escala y Box-Cox en este contexto?

¿Qué modo de Anaconda se debe usar para los algoritmos de aprendizaje automático?

¿Cuáles son actualmente los temas candentes en la investigación de aprendizaje automático y en aplicaciones reales?

¿Alguna vez ha utilizado el aprendizaje automático de alguna manera para ayudar en las pruebas de software y la automatización de pruebas?

Si existieran interfaces neuronales, ¿cuáles serían las aplicaciones civiles? ¿Cuántos tendría, por qué?

¿Qué sitio web ofrece 'filtrado colaborativo como servicio'?

¿Quiénes son los mejores ingenieros de aprendizaje automático?

¿Existen trabajos de Ciencia de datos y Aprendizaje automático para estudiantes de primer año en India?

¿Qué empresas del área legal usan Machine Learning?

Aprendizaje automático: ¿es el enfoque descrito a continuación una buena forma de evaluar la calidad de las recomendaciones basadas en comentarios implícitos?

¿Cuál es la diferencia entre la regularización y el sesgo inductivo en el aprendizaje automático?

¿Cuál es la mejor manera de predecir una clase +/- en un escenario de aprendizaje automático donde tengo k características trinarias y un conjunto de datos del orden de cientos o miles?

Cómo saber qué algoritmo usar y cuándo