当前位置:   article > 正文

Python爬虫——使用JSON库解析JSON数据_爬虫json解析

爬虫json解析

文章目录

    • 1 如何在网页中获取 JSON 数据?
    • 2 Python 内置的 JSON 库

这几天在琢磨爬取动态网页,发现需要爬取 js 内容,虽然说最后还是没有用上 JSON 库进行解析,不过笔记写的都写了,就发出来记录一下吧。

1 如何在网页中获取 JSON 数据?

打开一个具有动态渲染的网页,按 F12 打开浏览器开发工具,点击“网络”,再刷新一下网页,观察是否有新的数据包。

在这里插入图片描述

发现有 js 后缀的文件,这就是我们想要的 json 数据了。

2 Python 内置的 JSON 库

内置的 json 库的函数:

  • dumps:用于将 Python 的数据类型转化为 json 字符串。

  • loads:将 json 字符串转化为 Python 的数据类型。

实例 1:

import json

data = [ { 'a' : 1, 'b' : 2, 'c' : 3, 'd' : 4, 'e' : 5 } ]

data2 = json.dumps(data)
print(data2)

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7

输出结果:

[{"a": 1, "c": 3, "b": 2, "e": 5, "d": 4}]

  • 1
  • 2

实例 2:

#!/usr/bin/python
import json

jsonData = '{"a":1,"b":2,"c":3,"d":4,"e":5}';

text = json.loads(jsonData)
print(text)

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8

输出结果:

{u'a': 1, u'c': 3, u'b': 2, u'e': 5, u'd': 4}

  • 1
  • 2

关于Python技术储备

学好 Python 不论是就业还是做副业赚钱都不错,但要学会 Python 还是要有一个学习规划。最后大家分享一份全套的 Python 学习资料,给那些想学习 Python 的小伙伴们一点帮助!

包括:Python激活码+安装包、Python web开发,Python爬虫,Python数据分析学习等教程。带你从零基础系统性的学好Python!

一、Python学习大纲

Python所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。
在这里插入图片描述

二、Python必备开发工具

在这里插入图片描述

三、入门学习视频

四、实战案例

光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。在这里插入图片描述

五、python副业兼职与全职路线

在这里插入图片描述

上述这份完整版的Python全套学习资料已经上传CSDN官方,如果需要可以微信扫描下方CSDN官方认证二维码 即可领取

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/在线问答5/article/detail/963313
推荐阅读
相关标签