国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 數(shù)據(jù)庫 > Redis > 正文

Redis緩存穿透出現(xiàn)原因及解決方案

2020-10-28 21:27:19
字體:
供稿:網(wǎng)友

在并發(fā)式的項(xiàng)目當(dāng)中,一定要考慮一個(gè)緩存穿透的情況。那么什么是緩存穿透呢?簡單的說來,就是當(dāng)大量請求的key根本不在緩存當(dāng)中,所以導(dǎo)致了請求直接到了數(shù)據(jù)庫上,根本沒有經(jīng)過緩存這一層。比如一個(gè)黑客故意制造我們緩存中不存在的key發(fā)送大量的請求,就會(huì)導(dǎo)致請求直接落到數(shù)據(jù)庫上。

也就是說,緩存穿透就是:1.緩存層不命中。2,存儲(chǔ)層不命中,不將空的結(jié)果寫回緩存。3,返回空結(jié)果給客戶端。

一般mysql的默認(rèn)最大連接數(shù)是150左右,當(dāng)然這個(gè)是可以用show variables like ‘%max_connections%'命令來查看。

當(dāng)然這只是一個(gè)指標(biāo),cpu磁盤內(nèi)存網(wǎng)絡(luò)等等原因都影響了他的并發(fā)能力,所以一般3000的并發(fā)請求就可以殺死大部分的數(shù)據(jù)庫。

那么出現(xiàn)緩存穿透的時(shí)候需要怎么應(yīng)對呢?

1)最基本的方式就是做好參數(shù)校檢,比如不合法的請求就直接拋出異常信息給客戶端,就比如設(shè)置查詢條件id不能小于0或者傳入郵箱格式不正確時(shí)直接返回錯(cuò)誤消息給客戶端。但是這樣還是會(huì)出現(xiàn)緩存穿透的現(xiàn)象。那么還可以通過下面幾個(gè)方案來解決:

2)緩存無效的key,如果數(shù)據(jù)庫和緩存都找不到某個(gè)key的數(shù)據(jù),就直接寫一個(gè)到redis中并設(shè)置它的過期時(shí)間 set key value EX 10086。這種方式可以解決請求的key變化不頻繁的情況,如果遇到專門的黑客攻擊就不能解決這個(gè)情況。但是如果依然想用這個(gè)方法的話,那么在設(shè)置過期時(shí)間的時(shí)候,時(shí)間短一點(diǎn),比如是一分鐘。多說一句設(shè)置key的格式一般是:表名:列名:主鍵名:主鍵。

3)利用布隆過濾器:布隆過濾器是一個(gè)非常神奇的數(shù)據(jù)結(jié)構(gòu),通過這個(gè)過濾器可以幫助我們非常方便的去判斷一個(gè)給定的數(shù)據(jù)是否存在于海量的數(shù)據(jù)當(dāng)中。所以布隆過濾器在針對數(shù)據(jù)去重和驗(yàn)證數(shù)據(jù)的合法性時(shí)是非常有用的,布隆過濾器的實(shí)質(zhì)就是一個(gè)bit(位)數(shù)組。也就是說每一個(gè)存進(jìn)的數(shù)據(jù)都僅僅只占一位,在數(shù)據(jù)結(jié)構(gòu)上來說相當(dāng)于List、Map、Set等數(shù)據(jù)結(jié)構(gòu),但是占用的空間更少而且效率更高,但是缺點(diǎn)是它返回的值是概率性的,并不是多么的準(zhǔn)確。當(dāng)一個(gè)元素加入到布隆過濾器的時(shí)候:1.使用布隆過濾器當(dāng)中的哈希函數(shù)對元素值進(jìn)行計(jì)算,得到哈希值。2.根據(jù)得到的哈希值,在位數(shù)組中把對應(yīng)的下標(biāo)改為1。那么設(shè)置完成之后,我們要怎么判斷一個(gè)元素是否存在于布隆過濾器當(dāng)中呢?

首先我們要根據(jù)給定的元素再次進(jìn)行hash計(jì)算;得到值之后判斷數(shù)組中的每個(gè)元素是否都為1,如果值都為1的話,那么說明這個(gè)值在過濾器當(dāng)中,如果不為1的話,就說明不再過濾器當(dāng)中。

舉個(gè)非常簡單的例子

如上圖所示,當(dāng)字符串要加入到布隆過濾器當(dāng)中時(shí),該事務(wù)首先由多個(gè)哈希函數(shù)生成不同的哈希值,然后在對應(yīng)的位數(shù)組的下標(biāo)的元素設(shè)置位1,當(dāng)二次存儲(chǔ)相同的字符串時(shí),因?yàn)橄惹暗膶?yīng)位置已經(jīng)存在,所以在去重的時(shí)候非常方便。如果我們需要判斷某個(gè)字符串是否在布隆過濾器當(dāng)中時(shí),只需要對給定的字符串再次進(jìn)行相同的哈希計(jì)算,得到的值判斷是否為1,從而判斷數(shù)據(jù)是否存在于布隆過濾器當(dāng)中,那么假如布隆過濾器說明一個(gè)數(shù)據(jù)存在時(shí),很小的概率會(huì)誤判,但是如果說明一個(gè)數(shù)據(jù)不存在時(shí),那么一定是不存在的。

那么通過這個(gè)原理,利用redis布隆過濾器來將所有可能存在請求的值放在布隆過濾器當(dāng)中,當(dāng)用戶請求時(shí),直接判斷用戶發(fā)送來的請求是否存在于布隆過濾器中,不存在的話,直接返回請求參數(shù)錯(cuò)誤信息給客戶,存在的話就繼續(xù)往下面走流程。

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持武林網(wǎng)。

發(fā)表評論 共有條評論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
主站蜘蛛池模板: 海南省| 神农架林区| 横峰县| 开化县| 炎陵县| 永平县| 商都县| 文登市| 英德市| 年辖:市辖区| 中卫市| 汉阴县| 濉溪县| 西峡县| 内黄县| 阿克陶县| 涞源县| 崇州市| 顺义区| 恩施市| 东辽县| 云梦县| 白城市| 永川市| 云霄县| 神木县| 休宁县| 尤溪县| 彭山县| 宝坻区| 武功县| 廊坊市| 紫云| 涞源县| 富平县| 温泉县| 寿宁县| 鱼台县| 台中市| 乐都县| 隆德县|