| Shennon formulasi: I=-(P1log21/P1+P2log21/P2+…+PNlog21/PN)
Bu yerda Pi – i chi xabarning ehtimoli.
K. Shennon tomonidan kiritilgan axborotni o’lchov birligini
ifodalovchi-bit atamasi har bir arifmetik qurilmalarning registrini va
yacheyka xotirasini bir jinsli elementlardan iboratliggi va har bir
element esa ikki 0 yoki 1 holatdan biri ko’rinishida bo’lishini anglatadi
1-misol. 100 sahifali kitobni 1 ta sahifasi 35 satrdan, har bir satri
esa 50 ta belgidan iborat bo’lsin. Kitobning axborot hajmi aniqlansin.
Sahifa 35 x 50 = 1750 bayt axborotga ega. Kitobdagi axborot hajmi:
1750 x 100 = 175000 bayt.
75000 / 1024 = 170,8984 Kbayt.
170,8984 / 1024 = 0,166893 Mbayt.
2-misol. Nosimmetrik bo’lgan to’rt qirrali piramidani tashlashda
uning bir tomonini tushish ehtimoli, p1=1/2, p2=1/4, p3=1/8, p4=1/8 dan iborat
bo’lsin. Piramdani tashlashdagi axborotlar sonini Shennon formulasi
yordamida aniqlanadi:
| 