출처: Elements of Information Theory - Second Edition, Thomas M. Cover & Joy A. Thomas 2.1 Jensen's inequality와 이에 대한 결과 두 파트로 나누어진 2장에서 후반부에 해당하는 2-2는옌센의 부등식 (Jensen's inequality)을 다루면서 시작할 것이다. 그 전에, convex function이란 개념에 대해 다룬다.다음과 같이 $(a,b)$사이에서 아래로 볼록한 성질 (convex)을 갖는 함수 (function) $f(x)$에 대해서 다음 수식을 만족한다.이때, $x_1$과 $x_2$는 $(a,b)$범위안에 있으며 $\lambda$의 값은 0과 1사이에 있다 $(0 \leq \lambda \leq 1)$. ..
