6.逻辑斯谛回归与最大熵模型

259 阅读1分钟
  1. 逻辑斯谛回归
    1. 分为二项与多项
    2. 一个事件发生的概率与其不发生的概率的比值的对数几率是输入x的线性函数

  2. 最大熵模型(注意是判别
  3. 模型)
    1. 学习概率模型时,在所有可能的概率(分布)中,熵最大的模型是最好的模型
    2. 最大熵模型的学习
      1. 等价于约束最优化问题

      2. 特征函数