当前位置:   article > 正文

网络爬虫常用框架Scrapy(Scrapy爬虫框架的安装)_爬虫框架scrapy 安装

爬虫框架scrapy 安装

由于Scrapy爬虫框架依赖的库比较多,所以在安装时,步骤比较繁琐。

其依赖的库有Twisted.lxml.pyOpenSSL.pywin32,其中,主要需要啊安装的库有Twisted.pywin32,至于lxml与pyOpenSSL库在安装 Scrapy框架时顺带就安装了。

Scrapy爬虫框架的安装详细教程

(1)安装Twisted模块,在网站https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted找到Twisted的安装包。然后,文件下载完成后,在其文件存储位置中以管理员身份运行命令提示符,进行安装。

 

pip install +文件地址

操作如下:

首先,打开网站,然后,Ctrl+F,调出搜索栏,在搜索栏中查询Twisted,并进行安装。

注意:在安装Twisted模块时,需要根据安装的python版本进行安装,例如,小编的python版本为3.11,则安装cp311最后win32与win64系统则看电脑的配置。(python的版本,不是pycharm的版本)

 其次:在文件存储位置中打开命令提示符需要shift+鼠标右键,选择“在此处打开命令窗口”如果没有此选项,或为“在终端中打开”的话,点击在终端中打开,打开之后,在窗口中点击小箭头。然后在下拉菜单中选择命令提示符。这样就可以打开命令提示符了,然后在其中输入内容即可。

(2)安装Scrapy模块,在打开的命令提示符窗口中输入pip install Scrapy命令,安装Scrapy框架。

(3)安装pywin32模块,在刚才的命令提示符中接着输入pip install pywin32命令,安装pywin32模块,安装完成后,可以在命令提示符窗口中输入import pywin32_system32,如果没有错误信息,则安装成功。

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/在线问答5/article/detail/819431
推荐阅读
  

闽ICP备14008679号