当前位置:   article > 正文

《github精选系列》——非常有趣实用的python爬虫例子_比较有意思的爬虫案例

比较有意思的爬虫案例

1 简单总结

1 淘宝模拟登录

2 天猫商品数据爬虫

3 爬取淘宝我已购买的宝贝数据

4 每天不同时间段通过微信发消息提醒女友

5 爬取5K分辨率超清唯美壁纸

6 爬取豆瓣排行榜电影数据(含GUI界面版)

7 多线程+代理池爬取天天基金网、股票数据(无需使用爬虫框架)

8 一键生成微信个人专属数据报告(了解你的微信社交历史))

9 一键生成QQ个人历史报告

10 一键生成个人微信朋友圈数据电子书

11 一键分析你的上网行为(web页面可视化)

12 一键导出微信读书的书籍和笔记

《github精选系列》——非常有趣实用的python爬虫例子

github地址:

https://github.com/shengqiangzhang/examples-of-web-crawlers

2 主要介绍

2.1 淘宝模拟登录

使用教程

1 点击这里下载

2 下载chrome浏览器

3 查看chrome浏览器的版本号,

4 点击这里下载

5 对应版本号的chromedriver驱动

6 pip安装下列包

pip install selenium

7 点击这里

8 登录微博,并通过微博绑定淘宝账号密码

9 在main中填写chromedriver的绝对路径

10 在main中填写微博账号密码

 #改成你的chromedriver的完整路径地址  
 chromedriver_path = "/Users/bird/Desktop/chromedriver.exe" 
 #改成你的微博账号 weibo_username = "改成你的微博账号" 
 #改成你的微博密码 weibo_password = "改成你的微博密码"
  • 1
  • 2
  • 3
  • 4

演示图片

《github精选系列》——非常有趣实用的python爬虫例子

2.2 天猫商品数据爬虫

使用教程

点击这里下载下载chrome浏览器查看chrome浏览器的版本号,
点击这里下载对应版本号的chromedriver驱动pip安装下列包 		
pip install selenium	 	
pip install pyquery点击这里登录微博,
并通过微博绑定淘宝账号密码在main中填写chromedriver的绝对路径在main中填写微博账号密码
  • 1
  • 2
  • 3
  • 4
  • 5

#改成你的chromedriver的完整路径地址 chromedriver_path = “/Users/bird/Desktop/chromedriver.exe” #改成你的微博账号 weibo_username = “改成你的微博账号” #改成你的微博密码

《github精选系列》——非常有趣实用的python爬虫例子

《github精选系列》——非常有趣实用的python爬虫例子

2.3 爬取淘宝我已购买的宝贝数据

使用教程

1 点击这里下载

2 下载chrome浏览器

3 查看chrome浏览器的版本号,

4 点击这里下载

5 对应版本号的chromedriver驱动

6 pip安装下列包

pip install selenium

pip install pyquery

7 点击这里

8 登录微博,并通过微博绑定淘宝账号密码

9 在main中填写chromedriver的绝对路径

10 在main中填写微博账号密码

\

#改成你的chromedriver的完整路径地址chromedriver_path = "/Users/bird/Desktop/chromedriver.exe" 
#改成你的微博账号weibo_username = "改成你的微博账号"
#改成你的微博密码
  • 1
  • 2
  • 3

\

《github精选系列》——非常有趣实用的python爬虫例子

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/我家小花儿/article/detail/624188
推荐阅读
相关标签
  

闽ICP备14008679号