Probabilidad y procesos markovianos

El proyecto consiste en analizar mediante la simulación de un proceso Markoviano el siguiente problema de toma de decisiones:Las ventas de una compañía se caracterizan mediante 2 estados: Alto = x yBajo = y. En un mes Alto se obtienen utilidades denotadas por un valor de ganancia g(x) = 1. En un mes Bajo la ganancia resulta en pérdidas y se denota g(y) = -1.La demanda en el tiempo (mes a mes) serige mediante un proceso de Markov con matriz de transición:P(x|x) = 3/4P(y|x) = 1/4P(x|y) = 0P(y|y) = 1a) Escriba una fórmula para calcular la ganancia  esperada en un paso de tiempo y mediantesimulación obtenga una gráfica de la ganancia en el tiempo, suponiendo que al inicio los estados Alto y Bajo son equiprobables. b) Un grupo de inversionistas debe decidir si abrir esta compañía es unabuena opción. Está claro que eventualmente la compañía caerá en el estado Bajo y no saldrá de ahí. Sin embargo si se abre la compañia y se deja funcionar un cierto número de meses se puede obtener unaganancia esperada positiva. Si la inversión inicial es de 1, ¿es posible obtener una ganancia mayor a la inversión inicial? En caso afirmativo, ¿cuántos meses debe funcionar la empresa antes de cerrar?De acuerdo con sus simulaciones, ¿la decisión de abrir la compañía implica riesgos?.c) Mediante una muy fuerte campaña publicitaria a efectuarse cada mes es posible cambiar la matriz de transición:P(x|y) = 0.2, P(y|y) = 0.8. De este modo la empresa puede sobrevivir indefinidamente en el tiempo.Sin embargo, la inversión extra conlleva a un efecto neto sobre la función de ganancia: g(x) = 0.7, g(y)= -1. Además se necesita una inversión inicial de 3 unidades. ¿Cuántos meses hay que esperar en promedio para que la ganancia supere a la inversión? En su opinión, ¿hacer esta inversión extra es unabuena decisión? Explicar.
Como se explica en el inciso b), justamente la empresa está condenada a cerrar, pero aún así podría tener una ganancia positiva en un cierto número de meses.
tengo una...