U.s.a.e.r

Solo disponible en BuenasTareas
  • Páginas : 4 (886 palabras )
  • Descarga(s) : 10
  • Publicado : 27 de julio de 2010
Leer documento completo
Vista previa del texto
PROCESO DE MARKOV
* Método de programación dinámica.
* Las probabilidades de transición entre los estados se describen por medio de una cadena de Markov.
OBJETIVO
Determinar la política ocurso de opinión optima que maximice el ingreso esperado del proceso de un numero de datos finito o infinito.
Campo de acción del problema de decisión de Markov
Todos los años, al inicio de laestación de cultivo, una jardinera realiza pruebas químicas para revisar la condición de la percela. Dependiendo los resultados de las pruebas, puede clasificar la productividad del jardín para una nuevatemporada como buena, regular o deficiente.
Con el paso de los años se determino que la productividad del año en curso puede suponerse de la condición del año anterior por lo tanto, puede representarlas probabilidades de transición de un periodo de un año a otro a travez de:
| Estado del sistema para año próximo |
Estado del sistema este año | | 1 | 2 | 3 |
| 1 | 0.2 | 0.5 | 0.3 |
|2 | 0 | 0.5 | 0.5 |
| 3 | 0 | 0 | 1 |

Productividad (condición del terreno) | Estado del sistema |
Buena | 1 |
Regular | 2 |
Deficiente | 3 |

La mujer puede alterar las posibilidadsde transición P1 toman cursos de acción (fertilizado) por tanto se obtiene:
P2= | | 1 | 2 | 3 |
| 1 | 0.3 | 0.6 | 0.1 |
| 2 | 0.1 | 0.6 | 0.3 |
| 3 | 0.05 | 0.4 | 0.55 |

Para poner enperspectiva, se aasocia una función de rendimiento estructurada de recompensas.
Esta expresa la ganancia o perdiad durante el periodo de un año dependiendo de la transición.

R1=||rij1|| | | 1 | 2| 3 |
| 1 | 7 | 6 | 3 |
| 2 | 0 | 5 | 1 |
| 3 | 0 | 0 | -1 |

R2=||rij2|| | | 1 | 2 | 3 |
| 1 | 6 | 5 | -1 |
| 2 | 7 | 4 | 0 |
| 3 | 6 | 3 | -2 |

Ejemplo
Si el sistemaestuviera en estado 1 y se mantuviera en ese estado durante el año según la ganacia seria:
Rij2=6 a rij1=7
POLÍTICA ESTACIONARIA
Ejemplo.
Se pide se aplique fertilizante solo cuando la condición del...
tracking img