information
oplysninger ikke lige sandsynlige, er den informationsmængde, der er forbundet med den enkelte oplysning (fx oplysning nr. x med sandsynligheden px), lig med totalslogaritmen til dennes inverse sandsynlighed, Hn = log2(1/px). Man ser, at jo mere usandsynlig en oplysning er