今天,項目經理問我一個問題,問我這里有2000個URL要檢查是否能正常打開,其實我是拒絕的,我知道因為要寫代碼了,正好學了點Python,一想,python處理起來容易,就選了python,開始把思路想好:
1.首先2000個URL??梢苑旁谝粋€txt文本內
2.通過python 把內容內的URL一條一條放進數組內
3.打開一個模擬的瀏覽器,進行訪問。
4.如果正常訪問就輸出正常,錯誤就輸出錯誤
直接簡單粗暴甩代碼。因為涉及到隱私,圖片打了碼
import urllib.request import time opener = urllib.request.build_opener() opener.addheaders = [('User-agent', 'Mozilla/49.0.2')] #這個是你放網址的文件名,改過來就可以了 file = open('test.txt') lines = file.readlines() aa=[] for line in lines: temp=line.replace('/n','') aa.append(temp) print(aa) print('開始檢查:') for a in aa: tempUrl = a try : opener.open(tempUrl) print(tempUrl+'沒問題') except urllib.error.HTTPError: print(tempUrl+'=訪問頁面出錯') time.sleep(2) except urllib.error.URLError: print(tempUrl+'=訪問頁面出錯') time.sleep(2) time.sleep(0.1) 效果圖:

以上就是本文的全部內容,希望對大家的學習有所幫助,也希望大家多多支持武林網。
新聞熱點
疑難解答
圖片精選