国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

python基礎(chǔ)教程項(xiàng)目四之新聞聚合

2020-01-04 15:30:17
字體:
供稿:網(wǎng)友

《python基礎(chǔ)教程》書中的第四個(gè)練習(xí),新聞聚合?,F(xiàn)在很少見的一類應(yīng)用,至少我從來沒有用過,又叫做Usenet。這個(gè)程序的主要功能是用來從指定的來源(這里是Usenet新聞組)收集信息,然后講這些信息保存到指定的目的文件中(這里使用了兩種形式:純文本和html文件)。這個(gè)程序的用處有些類似于現(xiàn)在的博客訂閱工具或者叫RSS訂閱器。

先上代碼,然后再來逐一分析:

from nntplib import NNTPfrom time import strftime,time,localtimefrom email import message_from_stringfrom urllib import urlopenimport textwrapimport reday = 24*60*60def wrap(string,max=70):    '''    '''    return '/n'.join(textwrap.wrap(string)) + '/n'class NewsAgent:    '''    '''    def __init__(self):        self.sources = []        self.destinations = []    def addSource(self,source):        self.sources.append(source)    def addDestination(self,dest):        self.destinations.append(dest)    def distribute(self):        items = []        for source in self.sources:            items.extend(source.getItems())        for dest in self.destinations:            dest.receiveItems(items)class NewsItem:    def __init__(self,title,body):        self.title = title        self.body = bodyclass NNTPSource:    def __init__(self,servername,group,window):        self.servername = servername        self.group = group        self.window = window    def getItems(self):        start = localtime(time() - self.window*day)        date = strftime('%y%m%d',start)        hour = strftime('%H%M%S',start)        server = NNTP(self.servername)        ids = server.newnews(self.group,date,hour)[1]        for id in ids:            lines = server.article(id)[3]            message = message_from_string('/n'.join(lines))            body = message.get_payload()            if message.is_multipart():                body = body[0]            yield NewsItem(title,body)        server.quit()class SimpleWebSource:    def __init__(self,url,titlePattern,bodyPattern):        self.url = url        self.titlePattern = re.compile(titlePattern)        self.bodyPattern = re.compile(bodyPattern)    def getItems(self):        text = urlopen(self.url).read()        titles = self.titlePattern.findall(text)        bodies = self.bodyPattern.findall(text)        for title.body in zip(titles,bodies):            yield NewsItem(title,wrap(body))class PlainDestination:    def receiveItems(self,items):        for item in items:            print item.title            print '-'*len(item.title)            print item.bodyclass HTMLDestination:    def __init__(self,filename):        self.filename = filename    def receiveItems(self,items):        out = open(self.filename,'w')        print >> out,'''        <html>        <head>         <title>Today's News</title>        </head>        <body>        <h1>Today's News</hi>        '''        print >> out, '<ul>'        id = 0        for item in items:            id += 1            print >> out, '<li><a href="#" rel="external nofollow" >%s</a></li>' % (id,item.title)        print >> out, '</ul>'        id = 0        for item in items:            id += 1            print >> out, '<h2><a name="%i">%s</a></h2>' % (id,item.title)            print >> out, '<pre>%s</pre>' % item.body        print >> out, '''        </body>        </html>        '''def runDefaultSetup():    agent = NewsAgent()    bbc_url = 'http://news.bbc.co.uk/text_only.stm'    bbc_title = r'(?s)a href="[^" rel="external nofollow" ]*">/s*<b>/s*(.*?)/s*</b>'    bbc_body = r'(?s)</a>/s*<br/>/s*(.*?)/s*<'    bbc = SimpleWebSource(bbc_url, bbc_title, bbc_body)    agent.addSource(bbc)    clpa_server = 'news2.neva.ru'    clpa_group = 'alt.sex.telephone'    clpa_window = 1    clpa = NNTPSource(clpa_server,clpa_group,clpa_window)    agent.addSource(clpa)    agent.addDestination(PlainDestination())    agent.addDestination(HTMLDestination('news.html'))    agent.distribute()if __name__ == '__main__':    runDefaultSetup()

這個(gè)程序,首先從整體上進(jìn)行分析,重點(diǎn)部分在于NewsAgent,它的作用是存儲(chǔ)新聞來源,存儲(chǔ)目標(biāo)地址,然后在分別調(diào)用來源服務(wù)器(NNTPSource以及SimpleWebSource)以及寫新聞的類(PlainDestination和HTMLDestination)。所以從這里也看的出,NNTPSource是專門用來獲取新聞服務(wù)器上的信息的,SimpleWebSource是獲取一個(gè)url上的數(shù)據(jù)的。而PlainDestination和HTMLDestination的作用很明顯,前者是用來輸出獲取到的內(nèi)容到終端的,后者是寫數(shù)據(jù)到html文件中的。

有了這些分析,然后在來看主程序中的內(nèi)容,主程序就是來給NewsAgent添加信息源和輸出目的地址的。

這確實(shí)是個(gè)簡單的程序,不過這個(gè)程序可是用到了分層了。

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持VEVB武林網(wǎng)。


注:相關(guān)教程知識閱讀請移步到python教程頻道。
發(fā)表評論 共有條評論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
主站蜘蛛池模板: 金平| 娱乐| 焦作市| 花莲县| 三穗县| 将乐县| 商洛市| 罗甸县| 罗源县| 铜梁县| 宜宾县| 江源县| 科技| 儋州市| 土默特左旗| 云和县| 西昌市| 务川| 无极县| 瑞金市| 寿宁县| 普陀区| 浏阳市| 赞皇县| 沽源县| 勃利县| 抚松县| 马尔康县| 弋阳县| 卢氏县| 丹东市| 普安县| 寿阳县| 宣汉县| 神木县| 法库县| SHOW| 长治县| 清徐县| 隆尧县| 青龙|