当前位置:   article > 正文

Torchtext快速入门(二)——文本预处理_文本预处理 pad

文本预处理 pad

本文主要介绍 torchtext.transforms 的一些常用API。

一、VocabTransform

VocabTransform 主要用于将输入的词元映射成它们在词表中的索引。输入的词元可以是 List[str]List[List[str]] 型。

请看下面的例子

from collections import OrderedDict
from torchtext.transforms import VocabTransform

ordered_dict = OrderedDict([('a', 1), 
  • 1
  • 2
  • 3
声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:【wpsshop博客】
推荐阅读
相关标签
  

闽ICP备14008679号