开源模型bloomz可以做哪些中文任务？

作者：你好赵伟 | 2024-04-06 22:00:56

踩

Chatgpt很强大，开源的bloomz可以做些什么呢？效果如何？下面使用其70亿参数的模型测试一下效果。

运行环境：腾讯云P40（24G），deepspeed，transformers

使用模型：bigscience/bloomz-7b1-mt，支持中文

推理时GPU占用：14G+

1.情感分类-结果是对的

2.实体提取-结果不对

3.摘要-效果不佳

4.问答提取-效果不佳

5.相似问-效果不佳

6.翻译-直译？

结论：优点是能同时支持多类任务，缺点是效果与chatgpt相差甚远，即便是gpt3与chatgpt也相差甚远。预训练大模型gpt-3+指令微调+人类对齐=chatgpt。

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/你好赵伟/article/detail/374597