1、分析网站
打开开发者工具,我们观察到排行榜的数据并没有在doc里
doc文档
在Javascript里我么可以看到下面代码:
ajax的post方法异步请求数据
在 XHR一栏里,我们找到所请求的数据
json存储的数据
请求字段为:
post请求字段
2、伪装浏览器,并将json数据存入excel里面
获取信息
将数据保存到excel中
3、结果展示
以上这篇Python爬虫DOTA排行榜爬取实例(分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持脚本之家。
Copyright© 2013-2020
All Rights Reserved 京ICP备2023019179号-8