Python爬虫进阶——JsonPath使用案例,,如果一个网站采用前端
Python爬虫进阶——JsonPath使用案例,,如果一个网站采用前端
如果一个网站采用前端渲染,那么这个网站的前端会访问后端的一些接口,然后拿到后端向前端返回的数据(一般都是Json类型,Json对象的本质其实是一个bytes字节流,但我们可以通过转码的方式,把它转成str),再把Json数据交给JS,JS对其进行解析,最终渲染页面。
这就是前端渲染的一个流程。
很多商城网站都会这样做,因为可以减缓服务器的压力。
那对于我们爬虫开发来说,如果我们拿到了后端向前端返回的JSon数据,我们又该如何对它进行解析呢?
Json与Python的区别
Json | Python |
---|---|
null | None |
true | True |
false | False |
将Json数据转换成Python数据
导入json库,并生成python_data:import jsonpython_data = [ { 'username': 'name1', 'vip': True, }, { 'username': None, 'vip': False, },]dumps:
# dumps 用于把Python对象转换成Json对象json_data = json.dumps(python_data)print(json_data)print(type(json_data))
输出如下:
# loads 用于把Json对象转换成Python对象python_data2 = json.loads(json_data)print(python_data2)print(type(python_data2))
输出如下:
# dump 把Python类型的数据转化成Json类型的字符串,然后保存到本地json.dump(python_data,open('json.txt', 'w'))
输出如下:
# load 用于读取本地的json数据,并转换成Python对象python_data2 = json.load(open('json.txt'))print(python_data2)
输出如下:
为我心爱的女孩~~
Python爬虫进阶——JsonPath使用案例
相关内容
- 《一头扎进》系列之Python+Selenium框架设计篇6 - 价值好几
- Python自定义包引入【新手必学】,,前言本文的文字及图
- centOS7編譯安裝python,,1.下載python
- Python爬虫基础——re模块的提取和匹配,,re是Python的
- Jenkins运行python脚本出现 configparser.NoSectionError: No secti
- Python中安装框架如何换源,,想安装tornado
- python条件与循环-循环,,1 while语句w
- python爬虫总结,,安装Scrapy(有
- python学习,,http://blo
- 小白学Python(17)——pyecharts 日历图 Calendar,,Calendar
评论关闭