다섯 개의 알파벳 A, B, C, D, E의 발생 확률이 각각 0.25… | [7급 국가직 통신이론] 21년 1회차 기출문제 상세 페이지

1[7급 국가직 통신이론] 21년 1회차

다섯 개의 알파벳 A, B, C, D, E의 발생 확률이 각각 0.25, 0.25, 0.25, 0.125, 0.125인 정보원(information source)의 엔트로피[bits/symbol]는?

1.5

1.75

2.25

해설

엔트로피는 2.25 bits/symbol이다.

공식: $H=-\sum_i p_i\log_2 p_i$
정보량: 확률 0.25 기호는 2비트, 0.125 기호는 3비트이다.

대입: $H=3\times 0.25\times 2+2\times 0.125\times 3=1.5+0.75$
결과: $H=2.25\ \mathrm{bits/symbol}$

오류나 개정된 내용이 보이면 알려주세요

이어서 풀어보기