国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

Python實現爬取百度貼吧帖子所有樓層圖片的爬蟲示例

2020-01-04 15:21:39
字體:
來源:轉載
供稿:網友

本文實例講述了Python實現爬取百度貼吧帖子所有樓層圖片的爬蟲。分享給大家供大家參考,具體如下:

下載百度貼吧帖子圖片,好好看

Python,爬取,百度貼吧,帖子,圖片,爬蟲

python2.7版本:

#coding=utf-8import reimport requestsimport urllibfrom bs4 import BeautifulSoupimport timetime1=time.time()def getHtml(url):  page = requests.get(url)  html =page.text  return htmldef getImg(html):  soup = BeautifulSoup(html, 'html.parser')  img_info = soup.find_all('img', class_='BDE_Image')  global index  for index,img in enumerate(img_info,index+1):    print ("正在下載第{}張圖片".format(index))    urllib.urlretrieve(img.get("src"),'C:/pic4/%s.jpg' % index)def getMaxPage(url):  html = getHtml(url)  reg = re.compile(r'max-page="(/d+)"')  page = re.findall(reg,html)  page = int(page[0])  return pageif __name__=='__main__':  url  = "https://tieba.baidu.com/p/5113603072"  page = getMaxPage(url)  index = 0  for i in range(1,page):    url = "%s%s" % ("https://tieba.baidu.com/p/5113603072?pn=",str(i))    html = getHtml(url)    getImg(html)  print ("OK!All DownLoad!")  time2=time.time()  print u'總共耗時:' + str(time2 - time1) + 's'

希望本文所述對大家Python程序設計有所幫助。


注:相關教程知識閱讀請移步到python教程頻道。
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 峨山| 凌源市| 华阴市| 奈曼旗| 团风县| 理塘县| 广水市| 英超| 铜陵市| 乌海市| 湘阴县| 大田县| 谢通门县| 南和县| 台北县| 合水县| 大新县| 安丘市| 二手房| 扎囊县| 繁峙县| 措美县| 新乐市| 临洮县| 达拉特旗| 石景山区| 金门县| 青冈县| 拉萨市| 广灵县| 昌江| 湘乡市| 潮州市| 台中市| 紫云| 忻城县| 龙陵县| 浦东新区| 织金县| 双峰县| 清新县|