关于程序优化的第一个准则是“不要优化”，第二个准则是“不要优化那些无关紧要的部分”。

layout: posttitle: EM算法原理与推导date: 2018-05-27category: 机器学习tags:generativealgorithmmathstoolsmachinelearningkeywords:description:EM算法Jensen不等式对于凸函数，有\(E[f(X)]\ge f(E[X])\)。如果\(f\)是一个严格凸函数，那么只有当\(X=E[x]

参数问题理论知识失败的实现参数问题（自己挖的坑，跪着也要写完！(╯‵□′)╯︵┻━┻）理论知识前面说了HMM的解码和评估，但是这都是建立在我们有了HMM的正确参数的前提条件下。然而如果我们真的想解决实际问题，比如动作识别，语音识别等问题时，很难有最优的参数用来预设值。如果我们有先验知识，可以在初始化的时候使参数向最优值靠近一些，如果没有的时候，甚至我们只能用将概率1均分来赋初值。那么这种时候怎么