SentenceTransformers库介绍

作者：酷酷是懒虫 | 2024-08-11 19:12:47

踩

sentencetransformer

Sentence Transformer是一个Python框架，用于句子、文本和图像嵌入Embedding。

这个框架计算超过100种语言的句子或文本嵌入。然后，这些嵌入可以进行比较，例如与余弦相似度进行比较，以找到具有相似含义的句子，这对于语义文本相似、语义搜索或释义挖掘非常有用。

在这里插入图片描述

该框架基于PyTorch和Transformer，并提供了大量预训练的模型集合，用于各种任务，此外，很容易微调您自己的模型。

1️⃣ 安装

pip安装命令如下

pip install -U sentence-transformers
1

在这里插入图片描述
2️⃣ 形成文本嵌入Embedding

在一些NLP任务当中，我们需要提前将我们的文本信息形成连续性向量，方便之后送入模型训练，最容易的方式就是 OneHot 编码方式，但是这种方式会丧失句子的语义信息，所以为了

声明：本文内容由网友自发贡献，转载请注明出处：【wpsshop博客】