赞
踩
配置:
window10专业版
1650ti (开启text-generation-webui的时候显示out of memory)
本人本地部署了Llama2 7b python 版本,但是效果极差
如图所示:
就问了写很简单的问题,但是回复很怪,基本都是不知道
个人分析:
调参或者提示词输入不对
显存太小(但我后台check 4g显存也没有吃满/可能是系统保护)
如果是显存问题的话,我应该换8g还是12g及以上显卡呢?(我也担心8g显存吃满
求助!!十分感谢
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。