赞
踩
目前分词和词性标注技术已经非常成熟,常用的库有Jieba,哈工大pyltp等,以下不再赘述。
具体分词技术可以参考 https://blog.csdn.net/scarlettyellow/article/details/80458043
词性标注的目的在于得到分词之后每个词的语法属性(名词,动词,形容词等);主要任务是消除词性兼类歧义;可以应用在句法分析,词汇获取,信息抽取等应用中。
中文词性标注的难点在于中文没有屈折变化,也没有附加词缀,即一个词能够不改变形态的情况下表示多种意思,所以无法像英语那样通过词缀进行词性标注。
具体词性标注技术可以参考:
https://github.com/sebastianruder/NLP-progress/blob/master/english/part-of-speech_tagging.md
https://www.zhihu.com/question/302423008
汉语词性对照表: https://blog.csdn.net/sinat_33741547/article/details/78894163
命名实体识别的目地的在于抽取出句子中的命名性指称项,即人名,地名等实体
中文进行命名实体识别的难点:
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。