当前位置:   article > 正文

在中文zh_core_web_sm-2.3.1和英文en_core_web_sm 中,token_pos 实际上分别各有多少个标签?

在中文zh_core_web_sm-2.3.1和英文en_core_web_sm 中,token_pos 实际上分别各有多少个标签?

1. 对于en_core_web_sm-2.3.1模型,token.pos_属性共有18个标签,其中,每个标签的含义如下:

  1. ADJ: 形容词,表示人、事、物等的特征或性质。
  2. ADP: 介词或后置词,表示时间、地点、方向、方式等。
  3. ADV: 副词,表示动作或描述的方式、程度、频率等。
  4. AUX: 助动词,用于表示时态、语态、情态等。
  5. CCONJ: 连词,用于连接两个相同类型的句子成分。
  6. DET: 限定词,用于确定名词的范围或数量。
  7. INTJ: 感叹词,表示强烈的感情或语气。
  8. NOUN: 名词,表示人、事、物等的名称或类别。
  9. NUM: 数词,表示数量。
  10. PART: 小品词,表示语气、语调等。
  11. PRON: 代词,用于代替名词。
  12. PROPN: 专有名词,表示特定的人、事、物等名称。
  13. PUNCT: 标点符号,表示句子结构、语气等。
  14. SCONJ: 子连词,用于连接主从句等。
  15. SYM: 符号,用于表示特殊符号。
  16. VERB: 动词,表示动作或状态。
  17. X: 其他,用于表示无法归类的词。
  18. SPACE: 空格,表示空格符号。
  19. 注意:SPACE是一种特殊的词性标签,用于表示空格符号,而不是词汇本身的词性。

2. 对于zh_core_web_sm-2.3.1模型,token.pos_属性共有40个标签,其中,每个标签的含义如下:

  1. AD: 副形词,即具有形容词功能的副词。
  2. AS: 助词,用于表示语气、时态等。
  3. BA: 把字结构,用于表示动作的完成、结果等。
  4. CC: 连词,用于连接两个相同类型的句子成分。
  5. CD: 数词,表示数量。
  6. CS: 关联词,用于连接两个不同类型的句子成分。
  7. DEC: 的字结构,用于表示所属关系。
  8. DEG: 的字连接,用于连接名词与形容词、数词等。
  9. DER: 得字结构,用于表示动作的结果、程度等。
  10. DEV: 地字结构,用于表示动作的方式、状态等。
  11. DT: 限定词,用于确定名词的范围或数量。
  12. ETC: 等等,用于表示列举。
  13. FW: 外来词,即来源于外语的词语。
  14. IJ: 感叹词,表示强烈的感情或情感。
  15. JJ: 形容词,用于描述名词的特征或属性。
  16. LB: 语素字,用于构成词语的基本单位。
  17. LC: 方位词,表示方位关系。
  18. M: 数量词,表示数量或程度。
  19. MSP: 意思标记,表示某些词语的意思。
  20. NN: 名词,用于表示人、事物、地方等实体。
  21. NR: 人名,用于表示人物名称。
  22. NT: 机构团体名,用于表示组织机构或团体的名称。
  23. OD: 序数词,表示顺序或次序。
  24. ON: 拟声词,表示声音、动作等的模拟。
  25. P: 介词,表示名词与其他词语之间的关系。
  26. PN: 代词,用于代替名词。
  27. PU: 标点符号,用于分隔句子、段落等。
  28. SB: 主语结构,用于表示句子的主语成分。
  29. SP: 句子结构,用于表示句子的结构。
  30. VA: 动形词,即由动词和形容词构成的词语。
  31. VC: 是字结构,用于表示句子中的“是”字结构。
  32. VE: 有字结构,用于表示句子中的“有”字结构。
  33. VV: 动词,表示动作或状态。
  34. X: 非语素字,用于标记不属于任何词类的语言成分。
  35. Y: 语气词,用于表示语气。
  36. Z: 状态词,用于表示状态。
  37. ZR: 着字结构,用于表示动作的状态或结果。
  38. ADJ: 形容词,用于描述名词的特征或属性。
  39. ADP: 介词或后置词,表示名词与其他词语之间的关系。
  40. ADV: 副词,表示时间、地点、方式、程度等。
  41. AUX: 助动词,用于构成各种时态和语态的动词形式。
  42. CONJ: 连词,用于连接两个相同类型的句子成分。
  43. PART: 小品词,用于构成语气、句式、语调等。
  44. PRON: 代词,用于代替名词。

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/盐析白兔/article/detail/526304
推荐阅读
相关标签
  

闽ICP备14008679号