text: В более общем смысле, если P {\displaystyle P} и Q {\displaystyle Q} — вероятностные меры на множестве X {\displaystyle X} , и P {\displaystyle P} абсолютно непрерывна относительно Q {\displaystyle Q} , тогда РКЛ от P {\displaystyle P} до Q {\displaystyle Q} определено как: D K L ( P ∥ Q ) = ∫ X log ⁡ d P d Q d P {\displaystyle D_{\mathrm {KL} }(P\parallel Q)=\int _{X}\log {\frac {{\rm {d}}P}{{\rm {d}}Q}}\,{\rm {d}}P} , где d P d Q {\displaystyle {\frac {{\rm {d}}P}{{\rm {d}}Q}}} — это производная Радона—Никодима P {\displaystyle P} относительно Q {\displaystyle Q} , и при условии, что выражение справа существует.