Difference between revisions of "Aufgaben:Exercise 3.8Z: Tuples from Ternary Random Variables"
From LNTwww
| Line 21: | Line 21: | ||
{Berechnen Sie die folgenden Entropien. | {Berechnen Sie die folgenden Entropien. | ||
|type="{}"} | |type="{}"} | ||
| − | $ H(X)$ = { 1.585 } | + | $H(X)$ = { 1.585 3% } $bit$ |
| + | $H(Y)$ = { 1.585 3% } $bit$ | ||
| + | $ H(XY)$ = { 3.17 3% } $bit$ | ||
| + | |||
| + | {Welche Transinformationen besteht zwischen den Zufallsgrößen $X$ und $Y$? | ||
| + | |type="{}"} | ||
| + | $I(X; Y)$ = { 0 3% } $bit$ | ||
| + | |||
| + | {Welche Transinformationen besteht zwischen den Zufallsgrößen $X$ und $Z$? | ||
| + | |type="{}"} | ||
| + | $I(X; Z)$ = { 1.585 3% } $bit$ | ||
| + | |||
| + | {Welche bedingten Entropien bestehen zwischen $X$ und $Z$? | ||
| + | |type="{}"} | ||
| + | $H(Z|X)$ = { 1.585 3% } $bit$ | ||
| + | $ H(X|Z)$ = { 0 3% } $bit$ | ||
Revision as of 18:21, 26 November 2016
Wir betrachten das Tupel $Z = (X, Y)$, wobei die Einzelkomponenten $X$ und $Y$ jeweils ternäre Zufallsgrößen darstellen $\Rightarrow$ Symbolumfang $|X| = |Y| = 3$. Die gemeinsame Wahrscheinlichkeitsfunktion $P_{ XY }(X, Y)$ ist rechts angegeben.
In dieser Aufgabe sind zu berechnen:
- die Verbundentropie $H(XY)$ und die Transinformation $I(X; Y)$,
- die Verbundentropie $H(XZ)$ und die Transinformation $I(X; Z)$,
- die bedingten Entropien $H(Z|X)$ und $H(X|Z)$.
Hinweis: Die Aufgabe bezieht sich auf das Themengebiet von Kapitel 3.2.
Fragebogen
Musterlösung
1.
2.
3.
4.
5.
6.
7.
