В корзине лежат 4 яблока, 16 груш, 20 слив. Сколько бит информации несет сообщение о том, что из корзины извлечена слива?
грушу составляет 4/16 = 1/4 (для яблока 12/16 = 3/4). Если существует N равновероятных событий, то вероятность каждого отдельного события равна p=1/N. Применяя формулу: 2 в степени i = N = 1/p получаем i = 2 бита.