Teora de la Informacin y Mtodos de Codificacin

Actividad Fundamental 1
Fecha de entrega: 5 de septiembre antes de la hora de clase.
Modo de entrega: Personal, mediante el correo de tareas.

I - Resuelva correctamente.

1 - Considere un lenguae con strings de longitud unitaria {!,",C,#} con las probabilidades 1$%, 1$1&,
' ( 1$%, calcule la entrop)a correspondiente.

& * Calcule la !utoin+ormaci,n ( la -ntrop)a de
a. /an0ar un dado balanceado
b. /an0ar un dado cargado a 1 con p11. 2 3.&5
c. /an0ar dos dados.

% * Calcule la entrop)a de obtener una carta del palo de diamantes si se ha obtenido:
a. 4na carta negra
b. 4na carta de diamante
c. #os cartas de tr5bol ( un diamante
d. /as cuatro reinas

6- Considere un canal cu(o al+abeto de entrada es ! 2 {7,8,9,:,;} ( cu(o al+abeto de salida es " 2
{77,8,999, ::, ;;;;}<Cu=l es la longitud del canal de salida>

5 * Calcule la matri0 de probabilidad de transici,n de un canal cu(a entrada es ! 2 {3,1,&} con un
al+abeto de salida " 2 {3,1,&,?} cuando la probabilidad de cometer un error de transmisi,n es de
3.@&, ( de obtener una salida de 3, 1 o & es de 3.&3, 3.%5 ( 3. 6&, respectivamente.
Calcule la matri0 de probabilidades de transici,n siA
a. ? se convierte eBuitativamente en 3, 1 o &.
b. ? se convierte en 3 la mitad de las veces ( en uno el %8 de las veces.
c. Ce considera un canal con al+abetos de entrada ( salida eBuivalentes.
d. <-n cu=l de los casos anteriores el canal es sim5trico> -DpliBue detalladamente.