Resumen Documentos

Padre de la teoría se llama Claude E. Shannon
La etapa de la acumulación tecnológica
Más fácil transmitir digitalmente por un canal ruidos que hacerlo de formaanáloga.
La teoría de la información responde a la pregunta a dos preguntas claves:
1. Como se puede uno comunicar mejor en presencia de ruido
2. hasta dónde puede
Surge en 1948impulsada por la segunda guerra mundial
Como se mide la información contenida en un mensaje
La medida de la información no está necesariamente asociada al volumen de susoporte físico
Si existen palabras repetidas el código se llama singular. Si se producen ambigüedades se dice que no es unívocamente decodificable.
Un código útil debe serno singular y unívocamente decodificable.
Teorema de la codificación sin ruido
La idea básicamente es asignarle códigos mas cortos a aquellos eventos que ocurren conmayor frecuencia.
Primer teorema de Shannon: la longitud mínima a la que puedo llegar es la entropía.
Teorema de la codificación con ruido
Durante el transporte se modifiqueel mensaje cambiando un 0 por 1
Capacidad del canal tiene en cuenta dos limitaciones el ruido y el ancho de banda
El ruido puede provenir que otros estén usando el mismocanal, el ruido es inherente a la naturaleza de la materia.
Ancho de banda: cuantos símbolos por segundo puedo mandar diferente a mensajes por segundo símbolos son los 0 y1.
Si mi problema es el ruido la solución es trabajar con mucha redundancia.
Si mi problema es el ancho de banda, hacer menos palabras pero de símbolos más ricosRecapitulación
Da medidas objetivas de hasta donde se pueden hacer determinadas cosas y en particular halla limites teóricos
Un canal ideal sin ruido seria la matriz identidad.