zoukankan
html css js c++ java
JS散度
JS散度
(Jensen-Shannon divergence)
JS散度解决了KL不对称的问题,JS是对称的。
很明显,如果P1,P2完全相同,那么JS =0, 如果完全不相同,那么就是1.
JS散度是利用KL散度来得到的。JS是对称的而且值是有界的[0,1].
P,Q和第三个分布进行KL计算(第三个分布:(P+Q)/2 )
JS散度是有界的:
但是KL和JS散度来度量时候有一个问题:
如果两个分配P,Q离得很远,完全没有重叠的时候,那么KL值是没有意义的,而JS值是一个常数。这在学习算法中是比较致命的,这就意味这这一点的梯度为0。梯度消失了。
查看全文
相关阅读:
python kivy 简单入门
django 入门实例
window docker安装
apache进程和用户请求的关系
php cookie工作原理
react-router 简单的nginx配置
node单线程支撑高并发原理(node异步I/O)
知识图谱
java
java
原文地址:https://www.cnblogs.com/smuxiaolei/p/7400923.html
最新文章
如何完美获得一个double值的整数部分
如何完美获得一个double值的整数部分
java方法中开启一个线程
Java中时间加减的比较
Java中Map的4种遍历方式
could not resolve property(无法解析属性)
oracle创建序列,并插入记录
int与bigdecimal的相互转换
LeetCode(Medium)
基于theano的多层感知机的实现
热门文章
Python学习笔记之逻辑回归
C++单链表反转
C++笔试易错题集(持续更新)
C++产生固定范围内的固定数量的随机数
LeetCode(Easy)--C++笔记
Java基本数据类型装箱的127临界点
Java练习之使用StringBuilder
workerman + gateway +thinkphp 简单使用
观察者模式与发布订阅者模式的区别
python scrapy简单使用
Copyright © 2011-2022 走看看