概率模型有哪些分类
概率模型的分类如下:贝叶斯网络(有向无环图)和马尔科夫随机场(无向图)两类。在自然语言处理中最常用的就是各种基于马尔科夫的各种概率图模型。概率图结合了概率论与图论知识,节点和边表达概率相关关系的模型的总称,以建立一套通用自然语言智能推理理论。解决非确定性问题的传统思路就是利用概率论的思想,但是随着问题的复杂不断增加,传统的概率方法显得越来越力不从心。图模型的引入使人们可以将复杂问题得到适当的分解,变量表示为节点,变量与变量之间的关系表示为边,这样就使问题结构化。概率图理论就自然地分为三个部分,概率图模型表示理论、概率图模型推理理论和概率图模型学习理论。模型的学习:模型的学习是指将给定的概率模型表示为数学公式。模型的学习精度受以下三方面的影响:1.语料库样本集对总体的代表性。2.模型算法的理论基础及所针对的问题。不同模型因为原理不同,能够处理的语言问题也不同,比如朴素贝叶斯模型在处理文本分类方面精度很高;最大熵模型在处理中文词性标注问题上表现很好,条件随机场模型处理中文分词、语义组块等方面的精度很高。3.模型算法的复杂度。
什么是古典概率模型
概率的古典定义即古典概率。古典概率通常又叫事前概率,是指当随机事件中各种可能发生的结果及其出现的次数都可以由演绎或外推法得知,而无需经过任何统计试验即可计算各种可能发生结果的概率。关于古典概率是以这样的假设为基础的,即随机现象所能发生的事件是有限的、互不相容的,而且每个基本事件发生的可能性相等。例如,抛掷一枚平正的硬币,正面朝上与反面朝上是唯一可能出现的两个基本事件,且互不相容。如果把出现正面的事件记为E,出现事件E的概率记为p(E),则:P(E)=1/(1+1)=1/2一般说来,如果在全部可能出现的基本事件范围内构成事件A的基本事件有a个,不构成事件A的事件有b个,则出现事件A的概率为:P(A)=a/(a+b)