Shannon Entropisi nedir ?

0 beğenilme 0 beğenilmeme
163 kez görüntülendi

Bilgi kuramı, olasılık üzerine kurulu bu entropi hakkında en ayrıntılı bilgilere hangi kaynaklardan ulaşabilirim ?

Mesela,

$X$ bir olasılık deneyi olsun. $p\left( x_{i}\right)  $ ise $ x_{i}$ sonucunun ortaya çıkma olasılığı olarak verildiğinde, bu deneydeki ortalama bilgi miktarı

$H\left( x\right) \equiv -\sum _{i=1}^{n}p\left( x_{i}\right) \log (p\left( x_{i}) \right)$

Şeklinde hesaplanıyor.

Bu hesabın yararı nedir ? Neyi anlamamızı sağlar ?

,

5, Ekim, 2016 Akademik Matematik kategorisinde Dogukan633 (681 puan) tarafından  soruldu

Bu kitaba bakabilirsin. 

...