Дан алфавит, состоящий из букв {a,b,c,d,e,f,g}, информационный объем слова, состоящего из 4 букв этого алфавита, может быть определен с помощью формулы энтропии:

H = -log2(1/N)

Где H - информационный объем, а N - количество возможных комбинаций.

В данном случае для каждой из 4 позиций в слове существует 7 возможных букв, поэтому общее число возможных комбинаций равно 7^4 = 2401.

Поэтому информационный объем слова, состоящего из 4 букв данного алфавита с равномерным кодированием, составляет:

H = -log2(1/2401) = log2(2401) = log2(7^4) = 4 * log2(7) = 4 * 2.807 = 11.228 бит