border=0

Entropy en ynformaasje

De ynstruktiviteit fan it foarbyld is gewoan besjoen as is it dúdlik te sjen hoe't eardere ûnderfining (α) it oantal resultaten ferminderje kin en sadwaande de ûnwissigens fan lettere erfaringen (β). It ferskil tusken H (β) en H α (β), fansels, lit sjen hokker nije ynformaasje oer β we krije troch it eksperimintematisme α. Dizze wearde hjit ynformaasje oer ûnderfining β yn it ûnderfining α.

Dizze ekspresje makket it mooglik om de hichte fan ynformaasje te nummich te mjitten, om't wy de entropy al skatte kinne. It is maklik om in oantal gefolgen fan dat te krijen:

Corollary 1. Sûnt de ienheid fan 'e mjitting fan entropy in bytsje is, kin it bedrach fan ynformaasje yn deselde ienheden gemient wurde.

Corollary 2. Lit ûnderfining α = β, d. just makke it eksperimint β. Om't er folsleine ynformaasje oer him draacht, wurdt de wissichheid fan syn útkomst folslein fuortslein, d. H β (β) = 0. Dan / (β, β) = H (β), d. kinne dat beskôge wurde

Sjoch ek:

Eigenskippen fan it kommunikaasjekaniel

Formale grammatika

Foarbyld 8.2

Fermelding

Parallele oerdrachtkanaal

Gean werom nei Tafel Ynhâld: Teoretyske Stiftingen fan Computer Science

2019 @ edudocs.fun