热门标签
热门文章
- 1Xcode 模拟器如何录屏_xcode 模拟器录屏
- 2带你一步步实现低代码开发平台——整合接口平台，架构优化，使用低代码配置模块、实体、模型_低代码平台接口配置要简单易用
- 3时序数据学习笔记（八）_季节性自回归移动平均模型
- 4android studio 4.2.1运行java文件报错
- 5多组学+机器学习+膀胱癌+分型+建模
- 6c++递增三元组_在数列 a[1], a[2], ..., a[n] 中,如果对于下标 i, j, k 满足 0
- 7【数据结构】三、栈和队列：1.栈的基础（从数据结构三要素讨论：逻辑结构、物理结构（存储结构）、数据运算（基本操作））
- 8win_sever系列：windows sever 2012R和windows sever 2016如何开启远程连接服务以及问题解决_server2016开启远程桌面
- 9使用STL去除std::vector自定义结构体重复项_vector 去重自定义类型
- 10STM32f103c8t6 系统结构介绍_stm32f103c8t6pa14一般是什么作用
当前位置: article > 正文
自然语言处理 | (16) 文本表示概述_文本表示方法
作者：很楠不爱3 | 2024-05-14 03:54:48
赞
踩
文本表示方法
目录
文本表示，简单来说就是把文本变成数学上方便处理的向量(数字)而不是字符串。而怎么把字符串变成向量，是文本表示的核心问题。
1.为什么要进行文本表示
- 根本原因是计算机不方便直接对文本字符串进行处理，因此需要进行数值化或向量化。
- 便于机器学习算法处理。不仅传统的机器学习算法需要这个过程，深度学习也需要这个过程。
- 良好的文本表示形式可以极大的提高算法的效果。
2.文本表示分类(基于粒度，从细到粗)
- 词表示(将词转换为向量，更细粒度：英文中的字母/字符表示，中文中的字表示)
- 句子表示(或短文本表示)
- 文本表示(篇章表示)
3.文本表示方法分类
- 离散表示
1. one-hot表示
2. multi-hot表示
- 分布式表示
(一) 基于矩阵
1.基于降维的方法
2.基于聚类的方法
(二) 基于神经网络
1.CBOW
2.Skip-gram
3.NNLM
4.C&W
在接下里的几篇博客会详细介绍上述文本表示方法。
声明：本文内容由网友自发贡献，转载请注明出处：【wpsshop博客】
推荐阅读
相关标签
