Problemastyc115

PROBLEMARIO.TEORIA DE LA INFORMACION Y CODIFICACION

1. Un mensaje ocurre con una probabilidad de 0.3. Determine la información asociada con el mensaje en bits, nats y hartleys.


2. Un alfabetoconsiste de 6 letras con probabilidades respectivas . Encuentre la información media asociada con la transmisión de una letra.


3. Una fuente con un ancho de banda de 4000Hz es muestreado en un rangode Nyquist de 8000 muestras/s. Asumiendo que el resultado de la secuencia puede ser aproximadamente modelado por un DMS con alfabeto con probabilidades respectivas . Determine la entropía de lafuente y su rango en bits/s.



4. Encuentre el rango de bit requerido de 100 combinaciones posibles de brillantez de color con una probabilidad de ocurrencia de 0.003 cada una, 300 combinaciones con unaprobabilidad de ocurrencia de 0.001 y 624 combinaciones con una probabilidad de ocurrencia de 0.00064.



5. Suponga que las probabilidades de los niveles de gris son .Calcule la entropía de losniveles de gris y determine la longitud media de los mismos si la longitud es de 3 bits los primeros 4 simbolos y de 2 los restantes.




6. Considere una fuente L2 con longitud de 2 caracteres en {A, B,C, D} definidos con sus probabilidades respectivas y con probabilidades independientes. Cuál es la entropía de L2.?




7. Considere la distribución de probabilidad 0.49, 0.26, 0.12, 0.04, 0.04,0.03, 0.02.Calcula la información del evento 2, 4 y 6 además calcule la entropía de la fuente.




8. Encuentra la capacidad de canal para la siguiente matriz de transición:

1.
2.
3.
4.
5.
6.
7.8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
9. Un teclado numérico incluye los dígitos 0,1,2,3,4,5,6,7,8 y 9. Supóngase que laprobabilidad de enviar cualquier dígito es la misma que la de enviar cualquiera de los demás dígitos. Calcule con qué frecuencia se deben oprimir los botones para enviar información a razón de 2 bits/seg....