teoria komunikacji Shannona.pdf
teoria komunikacji Shannona.pdf
teoria komunikacji Shannona.pdf
Create successful ePaper yourself
Turn your PDF publications into a flip-book with our unique Google optimized e-Paper software.
Wstęp Model <strong>komunikacji</strong> Ilość informacji Entropia Kodowanie Redundancja Twierdzenia <strong>Shannona</strong> Podsumowanie<br />
Entropia H zdefiniowana wzorem<br />
H = −<br />
jest to miara trzech wielkości:<br />
n∑<br />
P i log 2 P i<br />
i=1<br />
a) średniej ilości nie zinterpretowanej (czystej) informacji<br />
przypadającej na symbol produkowany przez źródło,<br />
b) odpowiadającej jej średniej ilości deficytu danych (tego co<br />
Shannon nazywał niepewnością) jaki ma odbiorca przed<br />
sprawdzeniem sygnału od informującego oraz<br />
Izabela Bondecka-Krzykowska Wydział Matematyki i Informatyki UAM ul. Umultowska 87 61–614 Poznań izab@amu.edu.<br />
Informacja w informatyce cz. 1 <strong>teoria</strong> <strong>komunikacji</strong> C. <strong>Shannona</strong>