nlp中的数据清洗_nlp 数据清洗去除邮箱

作者：weixin_40725706 | 2024-06-02 22:57:02

踩

nlp 数据清洗去除邮箱

在nlp任务，肯定会遇到很多无意义的词和句子

对于词，我们可以用停用词表去除

对于句子，我们该怎样去掉呢

当然，这样的计算开销可能变得很大，必要的时候我们可以使用lsh或者Faiss来减少计算开销

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/weixin_40725706/article/detail/664682

nlp中的数据清洗_nlp 数据清洗 去除邮箱