2014-7-18任务完成情况
2014-07-19 01:01
295 查看
1.最大概率法使分词结果中的交集型歧义数量降低,对组合型歧义和未登录词有什么影响?会不会使这些错误增多?
参见:正向(逆向)最大匹配和最大概率分词的错误分析
2.最大概率法中求每个词语的费用时,如果对词频都乘以一个惩罚系数,观察这个系数对整体准确率和召回率的影响,并分析原因。
参见:最大概率法分词中词频惩罚因子的作用探究
3.对于未登录词,调研主流的解决方法,并确定一种可行的方法进行实践。
未完成,明日继续。
参见:正向(逆向)最大匹配和最大概率分词的错误分析
2.最大概率法中求每个词语的费用时,如果对词频都乘以一个惩罚系数,观察这个系数对整体准确率和召回率的影响,并分析原因。
参见:最大概率法分词中词频惩罚因子的作用探究
3.对于未登录词,调研主流的解决方法,并确定一种可行的方法进行实践。
未完成,明日继续。