zoukankan
html css js c++ java
JS散度
JS散度
(Jensen-Shannon divergence)
JS散度解决了KL不对称的问题,JS是对称的。
很明显,如果P1,P2完全相同,那么JS =0, 如果完全不相同,那么就是1.
JS散度是利用KL散度来得到的。JS是对称的而且值是有界的[0,1].
P,Q和第三个分布进行KL计算(第三个分布:(P+Q)/2 )
JS散度是有界的:
但是KL和JS散度来度量时候有一个问题:
如果两个分配P,Q离得很远,完全没有重叠的时候,那么KL值是没有意义的,而JS值是一个常数。这在学习算法中是比较致命的,这就意味这这一点的梯度为0。梯度消失了。
查看全文
相关阅读:
eslint 的 env 配置是干嘛使的?
cookie httpOnly 打勾
如何定制 antd 的样式(theme)
剑指 Offer 66. 构建乘积数组
剑指 Offer 65. 不用加减乘除做加法
剑指 Offer 62. 圆圈中最后剩下的数字
剑指 Offer 61. 扑克牌中的顺子
剑指 Offer 59
剑指 Offer 58
剑指 Offer 58
原文地址:https://www.cnblogs.com/smuxiaolei/p/7400923.html
最新文章
二叉树层次遍历(BFS)
逻辑与逻辑或表达式
洗牌算法-shuffle
2.数据库的几个重要的概念
1.数据库概念
子查询
测试人员必备知识
如何设计一个“好的”测试用例
如何测试“用户登录”功能?
自动化测试的优劣势
热门文章
编写高效的软件缺陷报告
测试注意点随笔记录
测试计划模板
Module not found: Error: Can't resolve 'xlsx' in 'd:crxcrx-bussrc'
php 快捷执行代码
Vue.js TypeError: Cannot set property 'render' of undefined
npm: 权限阻止修复
npm Error: Cannot find module './auth.js'
Chrome 的 PNaCl 还活着么?
Missing initializer in const declaration
Copyright © 2011-2022 走看看