国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

Python3爬蟲之urllib攜帶cookie爬取網頁的方法

2020-01-04 13:40:28
字體:
來源:轉載
供稿:網友

如下所示:

import urllib.requestimport urllib.parse url = 'https://weibo.cn/5273088553/info'#正常的方式進行訪問# headers = {#  'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.84 Safari/537.36'# }# 攜帶cookie進行訪問headers = {'GET https':'//weibo.cn/5273088553/info HTTP/1.1','Host':' weibo.cn','Connection':' keep-alive','Upgrade-Insecure-Requests':' 1','User-Agent':' Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.84 Safari/537.36','Accept':' text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',# 'Referer: https':'//weibo.cn/','Accept-Language':' zh-CN,zh;q=0.9','Cookie':' _T_WM=c1913301844388de10cba9d0bb7bbf1e; SUB=_2A253Wy_dDeRhGeNM7FER-CbJzj-IHXVUp7GVrDV6PUJbkdANLXPdkW1NSesPJZ6v1GA5MyW2HEUb9ytQW3NYy19U; SUHB=0bt8SpepeGz439; SCF=Aua-HpSw5-z78-02NmUv8CTwXZCMN4XJ91qYSHkDXH4W9W0fCBpEI6Hy5E6vObeDqTXtfqobcD2D32r0O_5jSRk.; SSOLoginState=1516199821',}request = urllib.request.Request(url=url,headers=headers)response = urllib.request.urlopen(request)#輸出所有# print(response.read().decode('gbk'))#將內容寫入文件中with open('weibo.html','wb') as fp: fp.write(response.read())

以上這篇Python3爬蟲之urllib攜帶cookie爬取網頁的方法就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持VEVB武林網。


注:相關教程知識閱讀請移步到python教程頻道。
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 新津县| 西丰县| 西盟| 平乐县| 金川县| 金堂县| 泽州县| 襄垣县| 宜良县| 淮北市| 长治县| 五华县| 铜山县| 封开县| 北票市| 明溪县| 合山市| 射洪县| 柞水县| 甘谷县| 垫江县| 密云县| 澳门| 革吉县| 化隆| 晋宁县| 富阳市| 沙雅县| 平邑县| 远安县| 静海县| 怀宁县| 田东县| 漾濞| 武胜县| 吉木萨尔县| 赣州市| 饶平县| 六枝特区| 乌海市| 县级市|