Introdução à Teoria da Informação

Comunicação para ARPE
Teoria e exercícios comentados
Profa. Paolla Marletti – Aula 01

AULA

01:

Teoria

da

Informação:

Completo

(Introdução, entropia e redundância).
SUMÁRIO
1. Introdução
2. Teoria da Informação
3. Entropia e Redundância
4. Resumo do Concurseiro
5. Questões comentadas
6. Questões sem comentários

1.

PÁGINA
1
2
12
20
21
25

INTRODUÇÃO

A aula de hoje dará prosseguimento ao que vimos na aula 00.
Na verdade, tomaremos o ponto em que paramos como partida. Tudo o que foi lido (se foi bem lido) na aula passada estará aqui exatamente igual até a página 06. A partir daí (da página 7) exploraremos um pouco mais a Teoria da Informação e desenvolveremos os tópicos sobre
Entropia e Redundância atrelados à esse assunto em nosso edital.
Perceba que é bem importante ter entendido bem o esquema da aula passada (aqui também presente) de como ocorre o fluxo das informações segundo a ótica de Shannon e Weaver. Qualquer coisa, vamos nos falando no fórum.
Abraços e boa aula!

Profa. Paolla Marletti

Página 1 de 28

Comunicação para ARPE
Teoria e exercícios comentados
Profa. Paolla Marletti – Aula 01

2.

TEORIA DA INFORMAÇÃO
A Teoria da Informação, ou Teoria Matemática da Informação,

surgiu a partir de um modelo (matemático) dos estudos de Claude Elwood
Shannon, para sua monografia chamada The Mathematical Theory of
Communication (A Teoria Matemática da Comunicação, publicada em
1948). Na época, suas pesquisas estavam no contexto dos laboratórios
Bell Systems, filial da American Telegraph & Telephone.1
Mais tarde, a essa monografia foram acrescentados os comentários do pesquisador Warren Weaver. Grave bem esses dois nomes: Shannon e Weaver, Shannon e Weaver, Shannon e Weaver...
A teoria da Informação assemelha-se a alguns outros ramos