国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

使用Python編寫提取日志中的中文的腳本的方法

2019-11-25 17:34:25
字體:
來源:轉載
供稿:網友

由于工作需要在一大堆日志里面提取相應的一些固定字符,如果單純靠手工取提取,數據量大,勞心勞力,于是自然而然想到了用Python做一個對應的提取工具,代替手工提取的繁雜,涉及中文字符,正則表達式不好匹配,但不是不可以實現,這個以后優化時再說。

需求描述:

一個父目錄中存在多個子文件夾,子文件夾下有多個txt形式化的Log日志,要求從所有地方Log日志中找出CardType=9, CardNo=0時的CardID的值,并將其統計存儲到一個文本文件中,要求CardID不能夠重復。

需求解析:

首先獲取所有的Log日志的全路徑,根據路徑分別加載到將各個Log日志加載到內存中進行提取分析,并將結果存儲到給定的文本文件中。

解決方案:

為了盡可能的簡潔通用,這里使用配置文件作為輸入變量的依據。不多說,上代碼:

配置文件如下:

2015430173625617.png (452×84)

103文件夾下有兩個文件:log1.txt和log2.txt, 內容類似如下:

2015430173809357.png (169×239)2015430173724409.png (175×242)

Python代碼實現如下:

# -*- coding: utf-8 -*-#!/usr/bin/python# filename: picktools.py# codedtime:2015-3-25import osimport configparser# 遍歷一個目錄,輸出所有文件名def itemsbrowse(path):  for home, dirs, files in os.walk(path):    for filename in files:      yield os.path.join(home, filename)# 給的文件中查找對應的字符串所在行      def findchars(filename, chars):  file = open(filename, 'r')  for eachline in file:    if eachline.find(chars) >= 0:      yield eachline  file.close()# 添加到指定的文件def addtofile(filename, mygenerator):  file = open(filename, 'a')   # 追加方式打開  for line in mygenerator:    file.write(line)  file.close()# 過濾重復的字符行def filter(filename):  mylist = []  file = open(filename, 'r')  for eachline in file:    mylist.append(eachline.strip())  file.close()    file2 = open(os.path.splitext(filename)[0] + '_filter.txt', 'w')  for line in list(set(mylist)):    print(line, file = file2)    #file2.write(line)   file2.close()  def excute():  iniconf = configparser.ConfigParser()  iniconf.read('config.ini')  ifile = iniconf.get('setting', 'ifilepath')  ofile = iniconf.get('setting', 'ofilepath')  chars = iniconf.get('setting', 'searchstr')    for fullname in itemsbrowse(ifile):    mygenerator = findchars(fullname, chars)    addtofile(ofile, mygenerator)      filter(ofile)            if __name__ == '__main__':  excute()


輸出結果:輸出兩個文件result.txt 和result_filter.txt

2015430173844654.png (180×280)2015430173909943.png (181×279)

心得體會:

1、利用Python去處理一些日常的小任務,可以很方便的完成,相比較C/C++來說,這方面生產力高了不少。

2、本文設計對中文字符的處理,所以使用正則表達式不太怎么方便,但不少不可以,后續版本中會添加對正則的支持!

3、由于初學中,所以代碼寫的不夠精煉簡潔,后續進行再優化!

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 乌兰浩特市| 尚义县| 嘉定区| 辛集市| 玛多县| 太谷县| 安丘市| 汾阳市| 巨野县| 巴里| 东乌珠穆沁旗| 卓资县| 阿合奇县| 镇坪县| 庄浪县| 黎川县| 利辛县| 勃利县| 同江市| 丰原市| 九龙县| 于都县| 同心县| 福州市| 彭水| 永清县| 永州市| 江阴市| 肇源县| 临安市| 攀枝花市| 聂拉木县| 深泽县| 林州市| 壤塘县| 牡丹江市| 昆明市| 中阳县| 蓝田县| 修武县| 巴中市|