当前位置:   article > 正文

AI-自然语言处理-文本向量化_ai 向量化

ai 向量化

学习目标
   • 了解自然语言处理基本知识
   • 掌握循环神经网络算法
   • 掌握自然语言处理关键技术
   • 了解自然语言处理的应用

什么是文本向量化
   • 文本向量化:将文本表示成一系列能够表达文本语义的向量。常用的向量化算法有:
      • one-hot
      • TF-IDF
      • word2vec
         o CBOW模型
         o Skip-gram模型
      • doc2vec/str2vec
         o DM(Distributed Memory)
         o DBOW(Distributed Bag of Words)
   • 文本表示是自然语言处理中的基础工作,文本表示的好坏直接影响到整个自然语言处理系统的性能。文本向量化是文本表示的一种重要方式。无论是中文还是英文,词语都是表达语义的基本单元
      在这里插入图片描述
            用四个维度(向量)表示这几个对象。
word2vec - CBOW模型
      在这里插入图片描述
            用中间词

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/笔触狂放9/article/detail/878608
推荐阅读
相关标签
  

闽ICP备14008679号