吉布斯不等式

吉布斯不等式是由約西亞·吉布斯在19世紀提出的。在信息論和概率論中，它能應用在Fano不等式和訊號源編碼定理的證明。