02.01.2014 Views

teoria komunikacji Shannona.pdf

teoria komunikacji Shannona.pdf

teoria komunikacji Shannona.pdf

SHOW MORE
SHOW LESS

Create successful ePaper yourself

Turn your PDF publications into a flip-book with our unique Google optimized e-Paper software.

Wstęp Model <strong>komunikacji</strong> Ilość informacji Entropia Kodowanie Redundancja Twierdzenia <strong>Shannona</strong> Podsumowanie<br />

Entropia H zdefiniowana wzorem<br />

H = −<br />

jest to miara trzech wielkości:<br />

n∑<br />

P i log 2 P i<br />

i=1<br />

a) średniej ilości nie zinterpretowanej (czystej) informacji<br />

przypadającej na symbol produkowany przez źródło,<br />

b) odpowiadającej jej średniej ilości deficytu danych (tego co<br />

Shannon nazywał niepewnością) jaki ma odbiorca przed<br />

sprawdzeniem sygnału od informującego oraz<br />

Izabela Bondecka-Krzykowska Wydział Matematyki i Informatyki UAM ul. Umultowska 87 61–614 Poznań izab@amu.edu.<br />

Informacja w informatyce cz. 1 <strong>teoria</strong> <strong>komunikacji</strong> C. <strong>Shannona</strong>

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!