bert参数数量_BERT模型到底有多少参数

作者：weixin_40725706 | 2024-07-14 19:55:57

踩

big bert 参数数量

在知乎回答问题有一个好处，就是不用太注意设置格式，也能整体表现的不错！赞一个！

最近做模型的时候，好奇心驱使，查看了一下BERT模型的参数量一共是多少，这里用的是“chinese-bert-wwm-ext”，和bert-base结构一样。模型的结构和细节代码就不详述了，因为很多人都看过，分析过！

加载完模型后，输入model，或者print(model）就可以查看模型的结构。

用如下的代码，能够比较简单的查询每一层参数量和总的参数量，是102267648.

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/weixin_40725706/article/detail/826136