国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

Python實現(xiàn)登錄人人網(wǎng)并抓取新鮮事的方法

2020-02-23 01:11:05
字體:
供稿:網(wǎng)友

本文實例講述了Python實現(xiàn)登錄人人網(wǎng)并抓取新鮮事的方法。分享給大家供大家參考。具體如下:

這里演示了Python登錄人人網(wǎng)并抓取新鮮事的方法(抓取后的排版不太美觀~~)

from sgmllib import SGMLParserimport sys,urllib2,urllib,cookielibclass spider(SGMLParser):  def __init__(self,email,password):    SGMLParser.__init__(self)    self.h3=False    self.h3_is_ready=False    self.div=False    self.h3_and_div=False    self.a=False    self.depth=0    self.names=""    self.dic={}      self.email=email    self.password=password    self.domain='renren.com'    try:      cookie=cookielib.CookieJar()      cookieProc=urllib2.HTTPCookieProcessor(cookie)    except:      raise    else:      opener=urllib2.build_opener(cookieProc)      urllib2.install_opener(opener)      def login(self):    url='http://www.renren.com/PLogin.do'    postdata={         'email':self.email,         'password':self.password,         'domain':self.domain          }    req=urllib2.Request(              url,              urllib.urlencode(postdata)                    )    self.file=urllib2.urlopen(req).read()    #print self.file  def start_h3(self,attrs):    self.h3 = True  def end_h3(self):    self.h3=False    self.h3_is_ready=True  def start_a(self,attrs):    if self.h3 or self.div:      self.a=True  def end_a(self):    self.a=False  def start_div(self,attrs):    if self.h3_is_ready == False:      return    if self.div==True:      self.depth += 1    for k,v in attrs:      if k == 'class' and v == 'content':        self.div=True;        self.h3_and_div=True  #h3 and div is connected  def end_div(self):    if self.depth == 0:      self.div=False      self.h3_and_div=False      self.h3_is_ready=False      self.names=""    if self.div == True:      self.depth-=1  def handle_data(self,text):    #record the name    if self.h3 and self.a:      self.names+=text    #record says    if self.h3 and (self.a==False):      if not text:pass      else: self.dic.setdefault(self.names,[]).append(text)      return    if self.h3_and_div:      self.dic.setdefault(self.names,[]).append(text)  def show(self):    type = sys.getfilesystemencoding()    for key in self.dic:      print ( (''.join(key)).replace(' ','')).decode('utf-8').encode(type), /         ( (''.join(self.dic[key])).replace(' ','')).decode('utf-8').encode(type)renrenspider=spider('your email','your password')renrenspider.login()renrenspider.feed(renrenspider.file)renrenspider.show()

希望本文所述對大家的Python程序設(shè)計有所幫助。

發(fā)表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發(fā)表
主站蜘蛛池模板: 安国市| 开江县| 林周县| 临湘市| 饶河县| 通州市| 施甸县| 连山| 浠水县| 宣汉县| 泌阳县| 韶关市| 乐山市| 恭城| 璧山县| 洛宁县| 建宁县| 韩城市| 许昌县| 唐山市| 惠水县| 都昌县| 团风县| 西青区| 凭祥市| 田东县| 棋牌| 苏尼特右旗| 葵青区| 东辽县| 庐江县| 肇庆市| 平阴县| 社旗县| 平江县| 延川县| 庆阳市| 将乐县| 本溪市| 东光县| 华蓥市|