Representación predictiva del estado - Predictive state representation

En informática , una representación de estado predictivo ( PSR ) es una forma de modelar un estado de sistema dinámico controlado a partir de un historial de acciones tomadas y observaciones resultantes. PSR captura el estado de un sistema como un vector de predicciones para futuras pruebas (experimentos) que se pueden realizar en el sistema. Una prueba es una secuencia de pares de acción-observación y su predicción es la probabilidad de que ocurra la secuencia de observación de la prueba si la secuencia de acción de la prueba se ejecutara en el sistema. Una de las ventajas de usar PSR es que las predicciones están directamente relacionadas con cantidades observables. Esto contrasta con otros modelos de sistemas dinámicos, como los procesos de decisión de Markov parcialmente observables (POMDP) ​​en los que el estado del sistema se representa como una distribución de probabilidad sobre estados nominales no observados.

Referencias