12: Cadenas Markov
( \newcommand{\kernel}{\mathrm{null}\,}\)
Una cadena de Markov se refiere a una secuencia (o “cadena”) de eventos discretos, generados de acuerdo con un conjunto fijo de reglas probabilísticas. La propiedad más importante de estas reglas es que sólo pueden referirse al estado actual del sistema, y no pueden depender de los estados pasados del sistema. Las cadenas de Markov tienen numerosas aplicaciones en física, matemáticas y computación. En la mecánica estadística, por ejemplo, las cadenas de Markov se utilizan para describir la secuencia aleatoria de microestados visitados por un sistema que experimenta fluctuaciones térmicas.