使用scrapy中遇到的坑总结

作者：小舞很执着 | 2024-07-26 22:00:03

踩

使用scrapy中遇到的坑总结

1，创建爬虫注意事项
在这里插入图片描述

在这里插入图片描述

2.没有cd到项目根目录，因为crawl会去搜搜cmd目录下的scrapy.cfg
在这里插入图片描述

运行报错：Unhandled error in Deferred:

在这里插入图片描述

UnicodeEncodeError: ‘gbk’ codec can’t encode character u’\xa0’ in position 148:

response.text.replace(u'\xa0',u' ')
1

在这里插入图片描述

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/小舞很执着/article/detail/887413