bert参数-max_seq_length的含义解释

作者：小蓝xlanll | 2024-04-13 01:35:20

踩

max_seq_length

bert里面有个max_seq_length。就是字数的个数

在bert里面的函数 _truncate_seq_pair增加了 tokens_a 和 tokens_b的length函数

发现：

1.当len(tokens_a) + len(tokens_b)> max_seq_length：会循环：把长度大的那个截断一个字符，指导小于。

2.汉字算一个，英文的话，一个单词算一个，一个标点符号算一个

譬如：鸡蛋蛋花汤怎么做的长度是8

如何删除我的iphone 的长度是7

3.所以可以测试一下，训练数据的分布，然后把max_seq_length从128修改为低一点数字，譬如：64 来节省内存。

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/小蓝xlanll/article/detail/413663