devbox
知新_RL
这个屌丝很懒，什么也没留下！
关注作者
热门标签
热门文章
当前位置:   article > 正文

几个nlp的小任务（抽取式问答）

作者：知新_RL | 2024-04-05 06:02:21

赞

踩

几个nlp的小任务（抽取式问答）

几个nlp的小任务（抽取式问答）

安装库

在这里插入图片描述

抽取式问答介绍、SQuAD数据集

在这里插入图片描述

初始化参数

在这里插入图片描述

加载、导入数据集

在这里插入图片描述
在这里插入图片描述

查看数据集示例

在这里插入图片描述

加载tokenizer

在这里插入图片描述

对长文本处理的演示

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

对答案的位置进行验证

在这里插入图片描述

整合刚才的步骤

在这里插入图片描述
在这里插入图片描述

对数据集中的数据进行预处理

在这里插入图片描述

加载微调模型

在这里插入图片描述

设置args 参数

在这里插入图片描述

使用数据清洗

在这里插入图片描述

在这里插入图片描述

设置训练函数，开始训练

在这里插入图片描述

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/知新_RL/article/detail/363781
推荐阅读
相关标签

Copyright © 2003-2013 www.wpsshop.cn 版权所有，并保留所有权利。

  

闽ICP备14008679号