赞
踩
项目目录
1、抖音短视频数据抓取实战系列(〇)——前言
2、抖音短视频数据抓取实战系列(一)——模拟器的选择与设置
3、抖音短视频数据抓取实战系列(二)——Fiddler安装配置以及模拟器监测环境配置
4、抖音短视频数据抓取实战系列(三)——Fiddler抓取抖音用户详细信息数据
5、抖音短视频数据抓取实战系列(四)——Java解析Json文件数据并存库
6、抖音短视频数据抓取实战系列(五)——Mitmproxy的安装以及模拟器Mitmproxy证书安装
7、抖音短视频数据抓取实战系列(六)——Mitmproxy+python编写监测程序
8、抖音短视频数据抓取实战系列(七)——python连接MySQL数据库
9、抖音短视频数据抓取实战系列(八)——Mitmproxy抓取用户详细信息并入库
10、抖音短视频数据抓取实战系列(九)——自动化Appium的环境与参数配置
11、抖音短视频数据抓取实战系列(十)——获取抖音dom元素属性
12、抖音短视频数据抓取实战系列(十一)——Appium与Mitmproxy联合-自动取存抖音用户信息
13、抖音短视频数据抓取实战系列(十二)——抓取实战BUG总集
1、首先我们将pycharm与数据库建立连接,需要找到页面中的DataBase窗口,一般在页面的右侧,没有显示的话,可以点击View-> Tool Windows->DataBase。
2、按照如图的顺序操作添加自己所需的数据库,博主用的是mysql。
3、然后就显示到联系数据库信息的页面,如果是第一次连接的时候,就需要点击下面的Download的位置下载连接的jdbc的jar包,然后等待jar包下载完成。博主这边之前安装过一次,不需要再下载jar包,所以图片用的是百度经验的。
4、然后我们填写数据库相关的参数。
Host:p地址,如果是本地就是localhost。
User:数据库用户名
Password:数据库的密码
DataBase:数据库名称
Port:端口号,默认3306
URL:jdbc:mysql://127.0.0.1/database?serverTimezone=GMT%2B8
5、点击下方的Test Connection,测试数据库连接,出现了一下提示则已成功连接。
6、这样我们就可以在pycharm上看到我的连接数据库的内容了。
7、以上只是pycharm连接了数据库,而我们需要的是python连接数据库,这里我们用的连接依赖包是pymysql,首先pip安装全局pymysql,代码如下:
pip install pymysql
8、[file] -> [Settings]
9、按照如下顺序添加pymysql依赖包,其中第三步是将依赖包安装在本项目,点击“+”添加依赖包。
10、输入pymysql搜索依赖包,点击安装即可。
11、安装完成之后,会在这里显示,最后ok保存即可。
12、连接配置好数据库之后,这样我们的python就可以进行数据库操作了,接下来,我们需要将抓取到的数据入库。
项目目录
1、抖音短视频数据抓取实战系列(〇)——前言
2、抖音短视频数据抓取实战系列(一)——模拟器的选择与设置
3、抖音短视频数据抓取实战系列(二)——Fiddler安装配置以及模拟器监测环境配置
4、抖音短视频数据抓取实战系列(三)——Fiddler抓取抖音用户详细信息数据
5、抖音短视频数据抓取实战系列(四)——Java解析Json文件数据并存库
6、抖音短视频数据抓取实战系列(五)——Mitmproxy的安装以及模拟器Mitmproxy证书安装
7、抖音短视频数据抓取实战系列(六)——Mitmproxy+python编写监测程序
8、抖音短视频数据抓取实战系列(七)——python连接MySQL数据库
9、抖音短视频数据抓取实战系列(八)——Mitmproxy抓取用户详细信息并入库
10、抖音短视频数据抓取实战系列(九)——自动化Appium的环境与参数配置
11、抖音短视频数据抓取实战系列(十)——获取抖音dom元素属性
12、抖音短视频数据抓取实战系列(十一)——Appium与Mitmproxy联合-自动取存抖音用户信息
13、抖音短视频数据抓取实战系列(十二)——抓取实战BUG总集
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。