标签：Phi frac 3.51 PRML TS phi beta exp 3.50
证明
贝叶斯定理\(p(w|t)\propto p(t|w)p(w)\)
代入3.10 ,3.48
\(p(\textbf{t}|\textbf{X},w,\beta) = \prod\limits_{n=1}^N\mathcal{N}(t_n|w^T\phi(x_n),\beta^{-1})\)
\(p(w) = \mathcal{N}(w|m_0,S_0)\)
有
\(p(w|t)\propto exp[-\frac{\beta}{2}(t_1-w^T\phi_1)^2] exp[-\frac{\beta}{2}(t_2-w^T\phi_2)^2]...exp[-\frac{\beta}{2}(t_n-w^T\phi_n)^2]exp[-\frac{1}{2}(w-m_0)^TS_0^{-1}(w-m_0)]\)
\(=exp[-\frac{\beta}{2}\{(t_1-w^T\phi_1)^2+...+(t_n-w^T\phi_n)^2\}]exp[-\frac{1}{2}(w-m_0)^TS_0^{-1}(w-m_0)]\)
\(=exp[-\frac{\beta}{2}\begin{pmatrix}
t_1-w^T\phi_1\\
...\\
t_n-w^T\phi_n
\end{pmatrix}^T\begin{pmatrix}
t_1-w^T\phi_1\\
...\\
t_n-w^T\phi_n
\end{pmatrix}]exp[-\frac{1}{2}(w-m_0)^TS_0^{-1}(w-m_0)]\)
\(=exp[-\frac{\beta}{2}(T-\Phi w)^T(T-\Phi w)]exp[-\frac{1}{2}(w-m_0)^TS_0^{-1}(w-m_0)]\)
其中
\(T=\begin{pmatrix}
t_1\\
...\\
t_n
\end{pmatrix}^T\)，\(\Phi w^T=\begin{pmatrix}
\phi_1^Tw\\
...\\
\phi_n^Tw
\end{pmatrix}=\begin{pmatrix}
w^T\phi_1\\
...\\
w^T\phi_n
\end{pmatrix}^T\)
\(=exp[-\frac{1}{2}(\beta T^TT-\color{red}{\beta T^T\Phi w}-\color{green}{\beta(\Phi w)^TT }+ \color{blue}{\beta w^T\Phi^T\Phi^T w}+ \color{blue}{w^TS_0^{-1}w} -\color{red}{m_0^TS_0^{-1}w}-\color{green}{w^TS_0^{-1}m_0 }+m_0^TS_0^{-1}m_0)]\)
\(=exp[-\frac{1}{2}(\color{blue}{w^T(S_0^{-1}+\beta \Phi^T\Phi)w}-\color{green}{w^T(S_0^{-1}m_0+\beta\Phi^TT)}-\color{red}{(\beta T^T\Phi + m_0^TS_0^{-1})w}+m_0^TS_0^{-1}m_0+\beta T^T T)]\),同色的相结合
3.50式\(m_N=S_N(S_0^{-1}m_0+\beta \Phi^TT)\)
3.51式\(S_N^{-1}=S_0^{-1}+\beta\Phi^T\Phi\)
用配方法，不确定可以反向乘开来验证
\(=exp[-\frac{1}{2}(w-m_N)^TS_N^{-1}(w-m_N)]exp[-\frac{1}{2}(m_0^TS_0^{-1}m_0+\beta ^TT+m_N^TS_N^Tm_N)]\)
\(=C\times exp[-\frac{1}{2}(w-m_N)^TS_N^{-1}(w-m_N)]\),因为后面一项和w没有关系
标签：Phi,frac,3.51,PRML,TS,phi,beta,exp,3.50 来源： https://www.cnblogs.com/boyknight/p/16036372.html
本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享； 2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关； 3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关； 4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除； 5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。