国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

Python實現登錄人人網并抓取新鮮事的方法

2019-11-25 17:30:21
字體:
來源:轉載
供稿:網友

本文實例講述了Python實現登錄人人網并抓取新鮮事的方法。分享給大家供大家參考。具體如下:

這里演示了Python登錄人人網并抓取新鮮事的方法(抓取后的排版不太美觀~~)

from sgmllib import SGMLParserimport sys,urllib2,urllib,cookielibclass spider(SGMLParser):  def __init__(self,email,password):    SGMLParser.__init__(self)    self.h3=False    self.h3_is_ready=False    self.div=False    self.h3_and_div=False    self.a=False    self.depth=0    self.names=""    self.dic={}      self.email=email    self.password=password    self.domain='renren.com'    try:      cookie=cookielib.CookieJar()      cookieProc=urllib2.HTTPCookieProcessor(cookie)    except:      raise    else:      opener=urllib2.build_opener(cookieProc)      urllib2.install_opener(opener)      def login(self):    url='http://www.renren.com/PLogin.do'    postdata={         'email':self.email,         'password':self.password,         'domain':self.domain          }    req=urllib2.Request(              url,              urllib.urlencode(postdata)                    )    self.file=urllib2.urlopen(req).read()    #print self.file  def start_h3(self,attrs):    self.h3 = True  def end_h3(self):    self.h3=False    self.h3_is_ready=True  def start_a(self,attrs):    if self.h3 or self.div:      self.a=True  def end_a(self):    self.a=False  def start_div(self,attrs):    if self.h3_is_ready == False:      return    if self.div==True:      self.depth += 1    for k,v in attrs:      if k == 'class' and v == 'content':        self.div=True;        self.h3_and_div=True  #h3 and div is connected  def end_div(self):    if self.depth == 0:      self.div=False      self.h3_and_div=False      self.h3_is_ready=False      self.names=""    if self.div == True:      self.depth-=1  def handle_data(self,text):    #record the name    if self.h3 and self.a:      self.names+=text    #record says    if self.h3 and (self.a==False):      if not text:pass      else: self.dic.setdefault(self.names,[]).append(text)      return    if self.h3_and_div:      self.dic.setdefault(self.names,[]).append(text)  def show(self):    type = sys.getfilesystemencoding()    for key in self.dic:      print ( (''.join(key)).replace(' ','')).decode('utf-8').encode(type), /         ( (''.join(self.dic[key])).replace(' ','')).decode('utf-8').encode(type)renrenspider=spider('your email','your password')renrenspider.login()renrenspider.feed(renrenspider.file)renrenspider.show()

希望本文所述對大家的Python程序設計有所幫助。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 抚松县| 巴里| 稷山县| 苍梧县| 济宁市| 金湖县| 澳门| 盱眙县| 栖霞市| 兴文县| 托克逊县| 友谊县| 沛县| 顺平县| 泽州县| 弥渡县| 休宁县| 兰西县| 拉孜县| 乳山市| 商南县| 喀喇沁旗| 琼结县| 秦皇岛市| 宁南县| 德惠市| 康定县| 宁陕县| 蓝田县| 仁寿县| 深水埗区| 皋兰县| 桐庐县| 武胜县| 延寿县| 宁夏| 乐都县| 蒙自县| 永仁县| 贵港市| 饶平县|