bert生成句向量(python)_python 利用bert 生成句向量

第一步：安装库

pip install bert-serving-server
pip install bert-serving-client
1
2

第二步：下载语料库

bert中文模型链接：https://storage.googleapis.com/bert_models/2018_11_03/chinese_L-12_H-768_A-12.zip
1

第三步：启动bert服务

(pycharm Terminal命令行)

bert-serving-start -model_dir E:\bert\chinese_L-12_H-768_A-12 -num_worker=1
1

第四步:读入文件输出词向量

from bert_serving.client import BertClient

if __name__ == '__main__':

    with open("bert.txt",'r',encoding='utf-8') as f:           #读入文件转换为列表
        content = f.read().splitlines()

    bc = BertClient()
    vec = bc.encode(content)
    print(vec)
1
2
3
4
5
6
7
8
9
10