B simvolga nisbatan
A simvolning shartli entropiyasi
A simvolga nisbatan
B simvolning shartli entropiyasi
2- misol. Matnli xabarlar uzatilganda statistik kuzatishlar natijasida maolum
bo‘ldiki,
6 ta harfdan iborat so‘zlarda har bir
100 ta xabarda
A harfi
80 marta,
B harfi
50 marta,
A va
B harflar birgalikda
10 marta uchraydi.
N(A/B) va
N(B/A) shartli
entropiyalar aniqlansin.
3- misol. Birinchi savatda ikkita olma va bitta nok, ikkinchi savatda uchta olma
va bitta nok, uchinchi savatda ikkita olma va ikkita nok bor. Ixtiyoriy savatda olmani
taxminan olinishi imkoniyatining to‘liq shartli entropiyasi aniqlansin.
4- misol. Xabarlar ikkili kod yordamida uzatiladi. Birinchi xolda
0 va
1 ning
paydo bo‘lish extimolligi mos xolda
p
0
= 0,8 va
p
1
= 0,2. Aloqa kanalida xalallar
yo‘q, yaoni
0 ni
1 ga va
1 ni
0 ga o‘tishlarning shartli extimolliklari nolga teng.
Ikkinchi xolda simvollar teng extimolliklar
p
0
= p
1
= 0,5 bilan uzatiladi, ammo
xalallar taosiri natijasida o‘tishlarning extimolliklari
p(1/1) = 0,8; p(1/0) =
Do'stlaringiz bilan baham: