Обсуждение:Расстояние Кульбака — Лейблера
Перейти к навигации
Перейти к поиску
 | Эта статья содержит текст, переведённый из статьи Kullback–Leibler divergence из раздела Википедии на английском языке. Список авторов находится на странице истории правок оригинальной статьи. Информация о включении текстов из других источников и их авторах может быть размещена на странице обсуждения оригинальной статьи. Перевод по состоянию на 14 марта 2017. |
А почему бы не дать общее определение через мат. ожидание логарифмов плотностей или, что тоже самое - через информационную энтропию? D_KL=H_p(q)-H_p(p)=E(-\ln q)-E(-ln p). Или я чего не понимаю?