当前位置:   article > 正文

用python3爬取天猫商品评论并分析(0)_天猫分析案例python

天猫分析案例python

  由于日后实习需要,新年假期在家里有空写了个抓取天mao评论的程序,并用pythonsnownlp模块进行简单的情感分析,由于本人刚接触python,项目可能有许多不足,请大家谅解!具体流程如下:

0. 主要流程

0. 数据采集

0. 目标网址获取

首先,获取自己要爬取的商品网页。如图:

 

这里用iPhone x的商品做样例(博主目前使用的手机是小米3,穷鬼啊有没有!)。因为加载评论的页面用js封装起来了。因此需要用到浏览器开发者工具获取保存评论的页面,直接按F12打开。如图:

 

NETwork//js目录下有一个形如上图的网址(巨长无比呀),细心发现会有一个page=1的字段,这个是控制不同页数的关键字!因此我们只需要改变page的值就能爬取不同页面的内容了!!具体代码如下:

  1. # -*- coding: utf-8 -*-
  2. import urllib.request
  3. import json
  4. import time
  5. import re
  6. import pymysql
  7. def find_mes
声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/不正经/article/detail/555660
推荐阅读
相关标签
  

闽ICP备14008679号