Teorija informacij

Teorija informacij Teorija informacij

mrvar.fdv.uni.lj.si
from mrvar.fdv.uni.lj.si More from this publisher
12.07.2015 Views

' ( ) * + , -¢ % ¢ . ¢ . ¢ . ¢ . ¢ . ¢ . ¢ .& .. ¢' ( ) * + , -¢ % ¢ 5 ¢ . ¢ . ¢ ¢ & ¢ ¢86 ¢ ¢86 ¢76 ¢76 5 ¡¢¥¤¦¡¨§ ¤¤¡ . 10.¡ "!:# § ¡ 10 234 3Definicija enote za količino informacije:En bit je količina informacije, ki jo dobimo, kodobimo odgovor na vprašanje na katerega stamožna natanko dva enako verjetna odgovora.– Primer 2 – ¡¢¥¤¦¡§/¤¤¦¡ . ¡ "!$# § ¡ 0– Primer 3 – ;1 ;:= ; < 2

? @¢ §Entropija sistema predstavlja spodnjo mejo števila bitov, kiso potrebni za predstavitev vseh elementov tega sistema.Mera za povezanost dvehspremenljivk na osnovi entropijeZa merjenje povezanosti poljubnih dveh spremenljivk(lahko tudi nominalnih) lahko uporabljamo Cramerjevkoeficient (Cramer’s V).A 1 Poleg njega obstaja še koeficient Rajskega (1964), ki jezgrajen na osnovi entropije:Imejmo dve spremenjivki in . Spremenljivka naj%zavzame različnih vrednosti, spremenljivka % parazličnihBvrednosti.C B D% E ¡ GF "!$# § ¡ DF 3

? @¢ §Entropija sistema predstavlja spodnjo mejo števila bitov, kiso potrebni za predstavitev vseh elementov tega sistema.Mera za povezanost dvehspremenljivk na osnovi entropijeZa merjenje povezanosti poljubnih dveh spremenljivk(lahko tudi nominalnih) lahko uporabljamo Cramerjevkoeficient (Cramer’s V).A 1 Poleg njega obstaja še koeficient Rajskega (1964), ki jezgrajen na osnovi entropije:Imejmo dve spremenjivki in . Spremenljivka naj%zavzame različnih vrednosti, spremenljivka % parazličnihBvrednosti.C B D% E ¡ GF "!$# § ¡ DF 3

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!