2-мавзу. Шартли энтропия ва бирлашма энтропия. Информациянинг узатиш тезлиги ва алоқа каналининг ўтказиш қобилияти

2.5-мисол. Хабарлар 5 та сифат аломатларидан (q=5 ) тузилган. Символ давомлилиги  = 20 мсек. Сигналларни узатиш тезлиги ҳамда информацияни узатиш тезлиги аниқлансин.
Ечиш. Сигналларни узатиш тезлиги

Информацияни узатиш тезлиги

2.6-мисол. Алоқа каналлари бўйича хабарларни узатишда тўртта турли символли алфавитдан фойдаланилган. Барча символларнинг давомлилиги  = 1 сек. Алоқа каналининг ўтказиш қобилияти аниқлансин.
Ечиш. Aлоқа каналининг ўтказиш қобилиятини аниқлаш учун қуйидаги формуладан фойдаланамиз.



ёки



бу ерда q хабарларни умумий сони; - сигналнинг ўртача давомлилиги.
Хабарларни узатиш учун тўртта символли алфавит ишлатилганлиги сабабли
q = 4⁴
Барча сигналларнинг давомлилиги
4 = 4 mc
Демак,

2.7-мисол. Хабарлар давомлилиги  = 0,1 сек бўлган ўзаро боғланмаган символлар ёрдамида узатилади. Хабарда символларнинг пайдо бўлиш эхтимолликлари бир хил. 2, 5ва 32 сифат аломатларидан тузилган хабарлар учун сигналларни узатиш тезлиги ҳамда информацияни узатиш тезлиги аниқлансин.
2.8-мисол. Хабарлар иккилик кодда узатилади(q = 2).“0” ни узатиш вақти  = 1 сек, “1” га мос сигнал давомлилиги  = 5 сек. Қуйидаги холлар учун информацияни узатиш тезлиги аниқлансин.

1. 
   p₀ = 0,5; p₁ = 0,5;
   
2. 
   p₀ = 0,37; p₁ = 0,63;
   
3.