scrapy 爬取今日头条报错 'SSL routines', 'SSL23_GET_SERVER_HELLO', 'unknown protocol'_shake: error([('ssl routines', 'ssl23_get_server_h

作者：Cpp五条 | 2024-03-06 11:02:14

踩

shake: error([('ssl routines', 'ssl23_get_server_hello', 'unknown protocol')

初次爬取时，代码没有问题，可以正常爬取，过了两日后，再次运行代码时，就抛出异常

ERROR: <twisted.python.failure.Failure twisted.web._newclient.ResponseNeverReceived: [<twisted.python.failure.Failure OpenSSL.SSL.Error: [('SSL routines', 'SSL23_GET_SERVER_HELLO', 'unknown protocol')]>]>
1

经多方搜索，找到解决方法：

pip uninstall scrapy
pip uninstall pyopenssl
pip install pyopenssl
pip install scrapy
1
2
3
4

即版本有点低了，不支持以上抛异常的连接方式
参考文章：
https://blog.csdn.net/lzc4869/article/details/79528505?utm_source=blogxgwz4
https://blog.csdn.net/qq_24861509/article/details/48019613

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/Cpp五条/article/detail/198223