Respuestas 1.

Dibujar el diagrama a bloques de un sistema de comunicaciones digitales: a) Indicar cuales son los bloques que se estudian en el curso de teora de la informacin b) Explicar brevemente la finalidad de estos bloques. RDiagrama: Ra: Fuente de informacin, Codificador de Fuente, Codificador de Canal. Rb:
-

Fuente de informacin: Dispositivo que genera mensajes, pueden se continuas (genera mensajes analgicos), o discretas (genera smbolos o caracteres). Codificador de Fuente: Representar de manera eficiente a la fuente de informacin mediante bits (eliminar redundancia). Codificador de Canal: Reducir la probabilidad de error en el receptor introduciendo redundancia estructurada a la informacin, al igual que reducir la potencia en el transmisor para una probabilidad de error dado.

2. En el contexto de las comunicaciones Cul es la finalidad del curso de teora de la informacin? R: La teora de la informacin en el contexto de las comunicaciones trata con el modelado y anlisis matemtico de Fuentes de Informacin y Canales de Comunicacin. 3. Qu es una fuente de informacin y como se clasifican las fuentes de informacin? R: Es un dispositivo que produce mensajes u objetos que producen un evento. Su clasificacin es la siguiente: Fuentes de Informacin Continuas Fuentes de Informacin Discretas 4. Qu es una fuente de informacin continua? Dar algunos ejemplos. R: son aquellas que producen mensajes en forma de seales analgicas y generan un nmero infinito de mensajes como posibles salidas. Ejemplos: - Audio en Radio Difusin - Audio en Telefona - Video en Radio Difusin de TV - Sismgrafo - Sonar - Sensores 5. Qu es una fuente de informacin discreta? Dar algunos ejemplos.

R: Son aquellas que producen mensajes en forma de secuencias de smbolos. Los smbolos generados por la fuente son parte de un alfabeto finito de smbolos. Ejemplos: - Computadoras - Dispositivos de Almacenamientos - Textos - Imgenes Digitalizadas 6. Qu es una fuente discreta sin memoria (DMS) y con memoria porque se les llama as? Dar algn ejemplo. R: a) Fuente Discreta sin Memoria (DMS): Cada letra actual a la salida de la fuente es estadsticamente independiente de todas las salidas pasadas y futuras.
Fuente de Informacin sin memoria

011011100. Cada smbolo emitido por la fuente es independiente de smbolos previos

Ejemplo: la combinacin de nombres en un usuario de algn juego en lnea b) Fuente Discreta con Memoria: La salida de la fuente discreta tiene dependencia estadstica, a partir de la cual se puede construir un modelo basado en el concepto de estacionaridad estadstica.
Fuente de Informacin con memoria

C,A,L,I,F,O,R,N,I,A Un smbolo actual depende de smbolos anteriores.

Ejemplo: Un archivo de texto. 7. Desde el punto de vista matemtico cmo se modela una fuente de informacin continua? R: Matemticamente se modelan como procesos aleatorios continuos. Produce una seal analgica x (t) la cual es una funcin muestra de un proceso aleatorio. 8. Qu es un proceso aleatorio? R: Un proceso aleatorio X (t) es una coleccin o conjunto de funciones muestra o realizaciones de x (t). Un proceso aleatorio es una funcin de 2 variables en el tiempo t y un espacio S. ( ) ( )

9. Cules son las propiedades de un proceso aleatorio? R: i. Para un tiempo fijo y S: ( )

El proceso aleatorio representa una variable aleatoria: ( ) ii. Para S fijo por ejemplo ( ( ) y t variable: ) ( )

El proceso aleatorio representa una funcin del tiempo o una funcin muestra ( ): ( : ( ))

iii. Para t fijo t=1 y S fijo

( ) iv. Si t es una variable y S es variable: ( )

( )

10. Qu es un proceso aleatorio estacionario? R: Son aquellos para los cuales sus propiedades estadsticas son invariantes para cualquier traslacin en el eje temporal. 11. Explicar por qu no se puede determinar de manera directa el espectro de una seal aleatoria y de qu forma se determina? R: Debido a que las seales aleatorias son de potencias no es posible calcular de manera directa su transformada de Fourier para conocer su espectro. Para lo cual debemos aplicar el teorema de Wiener-Kintchine. 12. Matemticamente como se modela una fuente de informacin discreta. R: Matemticamente se puede modelar una fuente de informacin discreta, emitiendo una secuencia de smbolos seleccionados de un alfabeto finito de L smbolos o letras [x1, x2, x3,, xL] donde cada letra del alfabeto tiene una probabilidad: Pk=P(x=xk) 0kL y

13. Cul es el significado de estacionariedad estadstica para una fuente discreta con memoria? R: La salida de la fuente tiene dependencia estadstica por ejemplo: un texto, a partir del cual se puede construir un modelo basado en el concepto de estacionariedad estadstica.

Una fuente discreta es estacionaria si: P(a1,a2,a3,an)=P(a1+m,a2+m,a3+m,.,an+m) para toda n1 y todos los desplazamientos de m.

14. De qu depende la cantidad de informacin de un evento y como se determina. Explicar. R: La cantidad de informacin sobre el acontecer de un evento est relacionada con su Probabilidad. Eventos con baja probabilidad(revelan ms informacin). Eventos con alta probabilidad(revelan menos informacin). 15. Qu es la informacin mutua entre un par de eventos? R: Se interpreta como la cantidad de informacin que el evento sobre el evento

proporciona

16. Explicar por qu en comunicaciones nos interesa conocer la informacin promedio que produce una fuente de informacin en lugar de conocer la informacin de un solo smbolo. R: Compara cdigos con la fuente de informacin. 17. Cul es el significado de la entropa de una fuente de informacin? R: Es un parmetro que nos permite determinar el contenido promedio de informacin de una fuente o un mensaje en particular 18. Cul es el significado de la entropa condicional? R: Representa la cantidad de incertidumbre promedio en X despus de observar a Y. 19. Cundo es aplicable el concepto de entropa diferencial? R: Cuando queremos representar la cantidad de informacin propia promedio que lleva una muestra de un proceso aleatorio.