zoukankan      html  css  js  c++  java
  • Estimation of Non-Normalized Statistical Models by Score Matching

    Hyv"{a}rinen A. Estimation of Non-Normalized Statistical Models by Score Matching. Journal of Machine Learning Research, 2005.

    我们常常会建模如下的概率模型:

    [p(xi; heta) = frac{1}{Z( heta)} q(xi; heta). ]

    比如energy-based models.
    上述问题一般来说用极大似然不易求解, 因为

    [Z( heta) = int_{xi} q(xi; heta) mathrm{d}xi, ]

    常常不易估计(特别是高维的情形, 用MCMC是致命的).
    所以倘若能够抛开(Z( heta))就能估计参数就好了, 本文就是提出了这个一个方法(虽然要求二阶导, 倘若用梯度方法求解便是需要三阶偏导了.)

    我发现这个人也是噪声对比估计(负样本采样)的作者之一.

    主要内容

    方法

    [psi(xi; heta) = left ( egin{array}{cc} frac{partial log p(xi; heta)}{partial xi_1} \ vdots \ frac{partial log p(xi; heta)}{partial xi_n} \ end{array} ight ) =left ( egin{array}{cc} psi_1(xi; heta) \ vdots \ psi_n(xi; heta) \ end{array} ight ) = abla_{xi} log p(xi; heta), ]

    并令

    [psi_x(xi) = abla_{xi} log p_x(xi), ]

    其中(p_x(xi))表示数据真实的分布.

    最小化下列损失能够保证(p(xi; heta))逼近(p_x(xi)):

    [J( heta) = frac{1}{2} int_{xi in mathbb{R}^n} p_x(xi) | psi(xi; heta) - psi_{x}(xi) |^2 dxi. ]

    损失函数的转换

    显然

    [psi_x(xi) = abla_{xi} log p_x(xi), ]

    设及真实分布, 不易求解, 但是通过对损失函数的转换, 我们发现其与真实分布并没有大的联系.

    [ abla_{xi} log p_x(xi) = frac{ abla p_x(xi)}{p_x(xi)}, \ psi(xi; heta) = abla_{xi} log p(xi; heta) = abla_{xi} log q (xi; heta). ]

    [| psi(xi; heta) - psi_{x}(xi) |^2 =|psi(xi; heta)|^2 - 2psi^T(xi; heta) psi_x(xi) + |psi_x(xi)|^2, ]

    第一项与(p_x)无关, 最后一项与( heta)无关, 故只需考虑第二项:

    [psi^T(xi; heta)psi_x(xi) = sum_{i=1}^n psi_{i}psi_{x,i} = sum_{i=1}^n psi_{i}frac{1}{p_x(xi)} frac{partial p_x(xi)}{partial xi_i}, ]

    [egin{array}{ll} int p_x(xi) psi^T(xi; heta)psi_x(xi) mathrm{d}xi &=int sum_{i=1}^n psi_{i}frac{partial p_x(xi)}{partial xi_i} mathrm{d}xi \ &=sum_{i=1}^n int psi_{i}frac{partial p_x(xi)}{partial xi_i} mathrm{d}xi \ &=sum_{i=1}^n int psi_{i}p_x(xi)|_{xi_i=-infty}^{xi_i=+infty} mathrm{d}xi_{setminus i} - int p_x(xi) frac{partial psi_i}{partial xi_i} mathrm{d}xi.\ &=-sum_{i=1}^n int p_x(xi) frac{partial psi_i}{partial xi_i} mathrm{d}xi. end{array} ]

    故:

    [J( heta) = sum_{i=1}^nint_{xi} p_x(xi) [frac{1}{2}(frac{partial q(xi; heta)}{partial xi_i})^2+ frac{partial^2 log q(xi; heta)}{partial^2 xi_i}] mathrm{d}xi + ext{ const }. ]

    故我们可以用如下损失近似:

    [hat{J}( heta) = frac{1}{2}sum_{t=1}^T sum_{i=1}^n [partial_i psi_i(x(t); heta) + frac{1}{2} psi_i(xi; heta)^2]. ]

    注: 上述证明需要用到如下条件:

    1. (p_x(xi), psi(xi; heta))可微;
    2. (p_x(xi) psi(xi; heta) ightarrow 0, ext{ if } |xi| ightarrow +infty).

    一个例子

    考虑多为正态分布:

    [p(x;mu, M) = frac{1}{Z(mu, M)} exp (-frac{1}{2}(x-mu)^2 M(x-mu)), ]

    此时(hat{J})存在显示解, 且恰为:

    [mu^* = frac{1}{T}sum_{t=1}^T x(t), \ M^* = [frac{1}{T}sum_{t=1}^T (x(t) - mu^*) (x(t) - mu^*)^T]^{-1}, ]

    为极大似然估计的解.

  • 相关阅读:
    正则表达式
    特殊符号作用
    sed
    scp
    EOF
    env
    JAVA进阶5
    JAVA进阶4
    JAVA进阶3
    JAVA进阶2
  • 原文地址:https://www.cnblogs.com/MTandHJ/p/15309183.html
Copyright © 2011-2022 走看看