SWJ小谈:中文分词的作用与概述-说教篇(2)_SEO优化教程

编辑Tag赚U币
教程Tag:暂无Tag,欢迎添加,赚取U币!

推荐:给Google提交视频Sitemap
Google治理员工具中所支持的Sitemap种类达到了四种,其中包括这种VideoSitemap,主要是给那些视频较多的网站,或者视频寄放网站所用。提交的方法同普通的通用s

一种方法是改进扫描方式,称为特征扫描或标志切分,优先在待分析字符串中识别和切分出一些带有明显特征的词,以这些词作为断点,可将原字符串分为较小的串再来进机械分词,从而减少匹配的错误率。另一种方法是将分词和词类标注结合起来,利用丰富的词类信息对分词决策提供帮助,并且在标注过程中又反过来对分词结果进行检验、调整,从而极大地提高切分的准确率。

对于机械分词方法,可以建立一个一般的模型,在这方面有专业的学术论文,这里不做具体论述。

2、基于理解的分词方法

这种分词方法是通过让计算机模拟人对句子的理解,达到识别词的效果。其基本思想就是在分词的同时进行句法、语义分析,利用句法信息和语义信息来处理歧义现象。它通常包括三个部分:分词子系统、句法语义子系统、总控部分。在总控部分的协调下,分词子系统可以获得有关词、句子等的句法和语义信息来对分词歧义进行判定,即它模拟了人对句子的理解过程。这种分词方法需要使用大量的语言知识和信息。由于汉语语言知识的笼统、复杂性,难以将各种语言信息组织成机器可直接读取的形式,因此目前基于理解的分词系统还处在试验阶段。

共2页: 上一页 1 [2] 下一页

分享:通过SEO高效进行海外推广
说到海外推广,可能大家也不会生疏,在这里也有许多做外贸、做英文站的朋友。一般来说,海外推广主要有这些推广方式,如:B2B平台,email营销,国际展会,黄页

共2页上一页12下一页
来源:模板无忧//所属分类:SEO优化教程/更新时间:2007-12-28
相关SEO优化教程