【机器学习】自然语言处理的常用算法_华为云的自然语言处理算法

作者：你好赵伟 | 2024-07-06 18:25:50

踩

华为云的自然语言处理算法

华为云学院

在这里插入图片描述

在这里插入图片描述

不同于传统的机器翻译模型，RNN有能力将语料集中的全部前序词汇纳入模型的考虑范围。传统的机器翻译模型仅仅考虑有限的前缀词汇信息作为语义模型的条件项。
在这里插入图片描述

长短期记忆网络（Long Short Term Memory，LSTM）：一种特殊的RNN，可以学习长期依赖信息。
在这里插入图片描述

GRU可以看成是LSTM的变种，GRU把LSTM的遗忘门和输入门用更新门替代。把cell state和隐状态ht进行合并，在计算当前时刻新信息的方法和LSTM有所不同。
在这里插入图片描述

在经典循环神经网络中，状态的传输从前往后单向传输。然而在有些问题中，当前时刻的输出不仅和前一刻的状态有关系，也和之后的状态相关。这时需要双向RNN（BiRNN）。
在这里插入图片描述

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/你好赵伟/article/detail/793652