zoukankan
html css js c++ java
JS散度
JS散度
(Jensen-Shannon divergence)
JS散度解决了KL不对称的问题,JS是对称的。
很明显,如果P1,P2完全相同,那么JS =0, 如果完全不相同,那么就是1.
JS散度是利用KL散度来得到的。JS是对称的而且值是有界的[0,1].
P,Q和第三个分布进行KL计算(第三个分布:(P+Q)/2 )
JS散度是有界的:
但是KL和JS散度来度量时候有一个问题:
如果两个分配P,Q离得很远,完全没有重叠的时候,那么KL值是没有意义的,而JS值是一个常数。这在学习算法中是比较致命的,这就意味这这一点的梯度为0。梯度消失了。
查看全文
相关阅读:
CF1011B
CF1011A
AHOI2009 中国象棋
jsp九大内置对象
jsp七大动作指令
navicat从下载到使用
javaWeb应用部署结构浅析
tomcat从下载到使用
JavaWEB前端向服务器端发送对象
初学者对Spring MVC的认识
原文地址:https://www.cnblogs.com/smuxiaolei/p/7400923.html
最新文章
Temporary
UVa 10791
UVa 10375
Java笔记
UVa 12169
UVa 11582
Codeforces 962D
Codeforces 955C
UVa 10817
UVa 1218
热门文章
[2019杭电多校第三场][hdu6609]Find the answer(线段树)
[2019杭电多校第三场][hdu6608]Fansblog
[2019杭电多校第三场][hdu6606]Distribution of books(线段树&&dp)
[2019杭电多校第二场][hdu6602]Longest Subarray(线段树)
[2019杭电多校第二场][hdu6601]Keen On Everything But Triangle
[2019杭电多校第二场][hdu6599]I Love Palindrome String(回文自动机&&hash)
[2019杭电多校第二场][hdu6598]Harmonious Army(最小割)
[CCPC-Wannafly & Comet OJ 夏季欢乐赛(2019)]飞行棋
[2019杭电多校第一场][hdu6583]Typewriter(后缀自动机&&dp)
[2019杭电多校第一场][hdu6579]Operation(线性基)
Copyright © 2011-2022 走看看