self
world. self. world. s. r. H(S) = - Σ s P(s)ln 2 P(s). H(R). if P(s 1 ,s 2 )=P(s 1 )P(s 2 ) then H(s 1 ,s 2 )=H(s 1 )+H(s 2 ). I(S,R)= Σ s,r P(s,r)ln 2 [P(s,r)/P(s)P(r)]. If r is binary , e.g. P(r=1)=a P(r=0)=1-a H(R) = a ln 2 (1/a) + (1-a) ln 2 [1/(1-a)]. θ. θ.
403 views • 40 slides