두 확률변수 X와 Y의 엔트로피가 각각 H(X)와 H(Y)이고, H(X… | [7급 국가직 통신이론] 15년 1회차 기출문제 상세 페이지

1[7급 국가직 통신이론] 15년 1회차
두 확률변수 XX와 YY의 엔트로피가 각각 H(X)H(X)와 H(Y)H(Y)이고, H(X∣Y)H(X|Y)는 조건부 엔트로피이며, XX와 YY의 평균상호정보(average mutual information)가 I(X;Y)I(X;Y)일 때, 다음 중 옳지 않은 것은?
1
I(X;Y)=I(Y;X)I(X;Y)=I(Y;X)
2
I(X;Y)=H(X)−H(Y∣X)I(X;Y)=H(X)-H(Y|X)
3
H(X)≥I(X;Y)H(X)\ge I(X;Y)
4
XX와 YY가 통계적으로 독립이면 H(X)=H(X∣Y)H(X)=H(X|Y)이다.
해설

상호정보는 I(X;Y)=H(X)−H(X∣Y)=H(Y)−H(Y∣X)I(X;Y)=H(X)-H(X|Y)=H(Y)-H(Y|X)이므로, H(X)H(X)에서 H(Y∣X)H(Y|X)를 뺀 식은 옳지 않다.

엔트로피와 그 조건부 엔트로피는 같은 변수끼리 짝지어야 한다.

  • 상호정보는 대칭이므로 I(X;Y)=I(Y;X)I(X;Y)=I(Y;X)가 성립한다.
  • H(X∣Y)≥0H(X|Y)\ge0이므로 I(X;Y)≤H(X)I(X;Y)\le H(X)이다.
  • 독립이면 YY를 알아도 XX의 불확실성이 줄지 않으므로 H(X∣Y)=H(X)H(X|Y)=H(X)이다.

오류나 개정된 내용이 보이면 알려주세요

이어서 풀어보기

[7급 국가직 통신이론] 15년 1회차 20문항 이어서 보기문제·정답·해설을 한 페이지에서 이어서 볼 수 있어요7급 국가직 통신이론 기출문제 암기장 전체 보기