脚本之家,脚本语言编程技术及教程分享平台!
分类导航

Python|VBS|Ruby|Lua|perl|VBA|Golang|PowerShell|Erlang|autoit|Dos|bat|

服务器之家 - 脚本之家 - Python - Python爬虫DOTA排行榜爬取实例(分享)

Python爬虫DOTA排行榜爬取实例(分享)

2020-11-17 00:36Python教程网 Python

下面小编就为大家带来一篇Python爬虫DOTA排行榜爬取实例(分享)。小编觉得挺不错的,现在就分享给大家,也给大家做个参考。一起跟随小编过来看看吧

1、分析网站

打开开发者工具,我们观察到排行榜的数据并没有在doc里

Python爬虫DOTA排行榜爬取实例(分享)

doc文档

在Javascript里我么可以看到下面代码:

Python爬虫DOTA排行榜爬取实例(分享)

ajax的post方法异步请求数据

在 XHR一栏里,我们找到所请求的数据

Python爬虫DOTA排行榜爬取实例(分享)

json存储的数据

请求字段为:

Python爬虫DOTA排行榜爬取实例(分享)

post请求字段

2、伪装浏览器,并将json数据存入excel里面

Python爬虫DOTA排行榜爬取实例(分享)

获取信息

Python爬虫DOTA排行榜爬取实例(分享)

将数据保存到excel中

3、结果展示

Python爬虫DOTA排行榜爬取实例(分享)

以上这篇Python爬虫DOTA排行榜爬取实例(分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持服务器之家。

延伸 · 阅读

精彩推荐