国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

在Python上基于Markov鏈生成偽隨機文本的教程

2020-02-23 00:47:07
字體:
來源:轉載
供稿:網友

 首先看一下來自Wolfram的定義

    馬爾可夫鏈是隨機變量{X_t}的集合(t貫穿0,1,...),給定當前的狀態(tài),未來與過去條件獨立。

Wikipedia的定義更清楚一點兒

    ...馬爾可夫鏈是具有馬爾可夫性質的隨機過程...[這意味著]狀態(tài)改變是概率性的,未來的狀態(tài)僅僅依賴當前的狀態(tài)。

馬爾可夫鏈具有多種用途,現在讓我看一下如何用它生產看起來像模像樣的胡言亂語。

算法如下,

        找一個作為語料庫的文本,語料庫用于選擇接下來的轉換。     從文本中兩個連續(xù)的單詞開始,最后的兩個單詞構成當前狀態(tài)。     生成下一個單詞的過程就是馬爾可夫轉換。為了生成下一個單詞,首先查看語料庫,查找這兩個單詞之后跟著的單詞。從它們中隨機選擇一個。     重復2,直到生成的文本達到需要的大小。


代碼如下
 

import random class Markov(object):   def __init__(self, open_file):  self.cache = {}  self.open_file = open_file  self.words = self.file_to_words()  self.word_size = len(self.words)  self.database()      def file_to_words(self):  self.open_file.seek(0)  data = self.open_file.read()  words = data.split()  return words      def triples(self):  """ Generates triples from the given data string. So if our string were    "What a lovely day", we'd generate (What, a, lovely) and then    (a, lovely, day).  """     if len(self.words) < 3:   return     for i in range(len(self.words) - 2):   yield (self.words[i], self.words[i+1], self.words[i+2])     def database(self):  for w1, w2, w3 in self.triples():   key = (w1, w2)   if key in self.cache:    self.cache[key].append(w3)   else:    self.cache[key] = [w3]      def generate_markov_text(self, size=25):  seed = random.randint(0, self.word_size-3)  seed_word, next_word = self.words[seed], self.words[seed+1]  w1, w2 = seed_word, next_word  gen_words = []  for i in xrange(size):   gen_words.append(w1)   w1, w2 = w2, random.choice(self.cache[(w1, w2)])  gen_words.append(w2)  return ' '.join(gen_words)

為了看到一個示例結果,我們從古騰堡計劃中拿了沃德豪斯的《My man jeeves》作為文本,示例結果如下。
 

In [1]: file_ = open('/home/shabda/jeeves.txt') In [2]: import markovgen In [3]: markov = markovgen.Markov(file_) In [4]: markov.generate_markov_text()Out[4]: 'Can you put a few years of your twin-brother Alfred,who was apt to rally round a bit. I should strongly advocatethe blue with milk'

[如果想執(zhí)行這個例子,請下載jeeves.txt和markovgen.py
馬爾可夫算法怎樣呢?

    最后兩個單詞是當前狀態(tài)。     接下來的單詞僅僅依賴最后兩個單詞,也就是當前狀態(tài)。     接下來的單詞是從語料庫的統(tǒng)計模型中隨機選擇的。
發(fā)表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發(fā)表
主站蜘蛛池模板: 湾仔区| 红桥区| 通榆县| 盐边县| 安化县| 靖宇县| 长治县| 兴和县| 纳雍县| 饶阳县| 上虞市| 旺苍县| 榆林市| 金塔县| 革吉县| 松原市| 伊宁市| 黔西县| 炎陵县| 郴州市| 健康| 靖江市| 科尔| 通辽市| 宁德市| 中山市| 温宿县| 米林县| 遂溪县| 容城县| 土默特左旗| 甘肃省| 曲周县| 江孜县| 云阳县| 师宗县| 新沂市| 积石山| 南陵县| 将乐县| 安达市|