1、分析網(wǎng)站

打開開發(fā)者工具，我們觀察到排行榜的數(shù)據(jù)并沒有在doc里

doc文檔

在Javascript里我么可以看到下面代碼：

ajax的post方法異步請求數(shù)據(jù)

在 XHR一欄里，我們找到所請求的數(shù)據(jù)

json存儲的數(shù)據(jù)

請求字段為：

post請求字段

2、偽裝瀏覽器，并將json數(shù)據(jù)存入excel里面

獲取信息

將數(shù)據(jù)保存到excel中

3、結(jié)果展示

以上這篇Python爬蟲DOTA排行榜爬取實例(分享)就是小編分享給大家的全部內(nèi)容了，希望能給大家一個參考，也希望大家多多支持武林網(wǎng)。