Для того чтобы найти количество информации, которое содержит данное событие, нужно определить энтропию системы, которая измеряется в битах.
Энтропия ( H ) для дискретной случайной величины ( X ) определяется как:
[ H(X) = - \sum_{i=1}^{n} P(x_i) \log_2 P(x_i) ]
где ( P(x_i) ) — вероятность события ( x_i ).
В нашем случае, событие состоит в том, что из урны извлекается один шар. В урне находятся 16 шаров: 4 черных, 8 синих, 2 красных и 2 зеленых. Соответственно, вероятности вытаскивания шара определенного цвета будут следующими:
- Вероятность вытаскивания черного шара ( P(\text{черный}) = \frac{4}{16} = \frac{1}{4} )
- Вероятность вытаскивания синего шара ( P(\text{синий}) = \frac{8}{16} = \frac{1}{2} )
- Вероятность вытаскивания красного шара ( P(\text{красный}) = \frac{2}{16} = \frac{1}{8} )
- Вероятность вытаскивания зеленого шара ( P(\text{зеленый}) = \frac{2}{16} = \frac{1}{8} )
Теперь подставим данные вероятности в формулу энтропии:
[ H(X) = - \left( P(\text{черный}) \log_2 P(\text{черный}) + P(\text{синий}) \log_2 P(\text{синий}) + P(\text{красный}) \log_2 P(\text{красный}) + P(\text{зеленый}) \log_2 P(\text{зеленый}) \right) ]
Подставим численные значения:
[ H(X) = - \left( \frac{1}{4} \log_2 \frac{1}{4} + \frac{1}{2} \log_2 \frac{1}{2} + \frac{1}{8} \log_2 \frac{1}{8} + \frac{1}{8} \log_2 \frac{1}{8} \right) ]
Вычислим логарифмы:
[ \log_2 \frac{1}{4} = -2 ]
[ \log_2 \frac{1}{2} = -1 ]
[ \log_2 \frac{1}{8} = -3 ]
Подставим обратно:
[ H(X) = - \left( \frac{1}{4} \cdot (-2) + \frac{1}{2} \cdot (-1) + \frac{1}{8} \cdot (-3) + \frac{1}{8} \cdot (-3) \right) ]
Выполним умножение:
[ H(X) = - \left( -\frac{2}{4} - \frac{1}{2} - \frac{3}{8} - \frac{3}{8} \right) ]
Сложим дроби:
[ H(X) = - \left( -\frac{1}{2} - \frac{1}{2} - \frac{6}{8} \right) ]
[ H(X) = - \left( -\frac{1}{2} - \frac{1}{2} - \frac{3}{4} \right) ]
[ H(X) = - \left( -1 - \frac{3}{4} \right) ]
[ H(X) = - \left( -\frac{7}{4} \right) ]
[ H(X) = \frac{7}{4} ]
Таким образом, количество информации, которое содержит событие вытаскивания одного шара из урны, составляет ( \frac{7}{4} ) бит, что равно ( 1.75 ) бит.