国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

零基礎寫python爬蟲之抓取百度貼吧代碼分享

2020-02-23 06:07:47
字體:
來源:轉載
供稿:網友

這里就不給大家廢話了,直接上代碼,代碼的解釋都在注釋里面,看不懂的也別來問我,好好學學基礎知識去!

代碼如下:
# -*- coding: utf-8 -*-
#---------------------------------------
#   程序:百度貼吧爬蟲
#   版本:0.1
#   作者:why
#   日期:2013-05-14
#   語言:Python 2.7
#   操作:輸入帶分頁的地址,去掉最后面的數字,設置一下起始頁數和終點頁數。
#   功能:下載對應頁碼內的所有頁面并存儲為html文件。
#---------------------------------------
import string, urllib2
#定義百度函數
def baidu_tieba(url,begin_page,end_page):  
    for i in range(begin_page, end_page+1):
        sName = string.zfill(i,5) + '.html'#自動填充成六位的文件名
        print '正在下載第' + str(i) + '個網頁,并將其存儲為' + sName + '......'
        f = open(sName,'w+')
        m = urllib2.urlopen(url + str(i)).read()
        f.write(m)
        f.close()
#-------- 在這里輸入參數 ------------------
# 這個是山東大學的百度貼吧中某一個帖子的地址
#bdurl = 'http://tieba.baidu.com/p/2296017831?pn='
#iPostBegin = 1
#iPostEnd = 10

bdurl = str(raw_input(u'請輸入貼吧的地址,去掉pn=后面的數字:/n'))
begin_page = int(raw_input(u'請輸入開始的頁數:/n'))
end_page = int(raw_input(u'請輸入終點的頁數:/n'))
#-------- 在這里輸入參數 ------------------
#調用
baidu_tieba(bdurl,begin_page,end_page)

以上就是python抓取百度貼吧的一段簡單的代碼,非常的實用吧,各位可以自行擴展下。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 太原市| 修水县| 保靖县| 三穗县| 钟祥市| 凉山| 丰都县| 广德县| 丽江市| 天等县| 浦江县| 桦南县| 肥城市| 邳州市| 黔东| 德格县| 临湘市| 苏尼特右旗| 新化县| 松桃| 万载县| 洛川县| 浦江县| 荣成市| 江西省| 郴州市| 淄博市| 南平市| 新野县| 永德县| 冷水江市| 永兴县| 洞头县| 英吉沙县| 高陵县| 云霄县| 江阴市| 天长市| 清流县| 福州市| 温泉县|