成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

Redis的模糊查詢在生產環境出現嚴重的性能問題

數據庫 其他數據庫 Redis
Redis是一個高性能高效率的key-value存儲的nosql數據庫,由于數據是存儲在內存中,因此訪問速度非常快,由于項目涉及到數據庫的查詢非常多,而數據變大并不是非常頻繁,所以在項目中采用Redis分擔大部分MySQL的壓力。

Redis是一個高性能高效率的key-value存儲的nosql數據庫,由于數據是存儲在內存中,因此訪問速度非常快,由于項目涉及到數據庫的查詢非常多,而數據變大并不是非常頻繁,所以在項目中采用Redis分擔大部分MySQL的壓力。

在項目中實際使用我用的Redis提供的客戶端連接工具包jedis,在項目中引入jedis.Jar即可。

  1. public static Set<String> searchLike(String like_key) { 
  2.    //線上環境模糊查詢帶來嚴重的性能問題,杜絕使用 
  3.    if(!Config.IS_BUG){ 
  4.         return null
  5.    } 
  6.    Jedis jedis = RedisApi.getJedis(); 
  7.    boolean is_ok = true
  8.    try { 
  9.         if (jedis == null) { 
  10.            return null
  11.         } 
  12.         return jedis.keys(like_key); 
  13.     } catch (Exception e) { 
  14.         // TODO: handle exception 
  15.         is_ok = false
  16.        return null
  17.     } finally { 
  18.         close(jedis, is_ok); 
  19.    } 

每當用戶登錄成功之后,都會生成一個cookie,分別存在客戶端和Redis數據庫,cookie的key由cookie值+用戶ID組成:cookie字符串+"_"+用戶ID,例如用戶cookie為“d9fb0ea5955fcf0a2183c5076”,用戶ID為 19092,那Redis中存儲的key就是 d9fb0ea5955fcf0a2183c5076_19092,最終的key-vlaue就是: 

  1. {"d9fb0ea5955fcf0a2183c5076_19092":d9fb0ea5955fcf0a2183c5076} 

而在用戶不斷的登錄成功,就不斷地產生這樣的記錄,久而久之,會積累出非常多的無用的key,浪費redis的空間,也加重了redis查詢的負擔,因此想到使用Redis的模糊查詢來清掉無用的cookie的key。

而Redis的客戶端jedis操作是通過jedis.keys(keys)來完成的,keys可以使用通配符來匹配Redis中的key。

通配符說明:

*: 0到任意多個字符 eg: searchLike("test*")

?: 1個字符

比如現在需要清除某個用戶所有的無用的cookie的key,,則可以寫成“ *_19092 ”。

  1. String key_like = "*_19092"
  2. Set<String> keys = RedisApi.searchLike(key_like); 

這樣就可以查出所有這個用戶的keys,調用jedis提供的批量刪除key的方法即可達到目的。

  1. String key_like = "*_19092"
  2. Set<String> keys = RedisApi.searchLike(key_like); 

到這里從需求到邏輯到編碼一氣呵成,簡單測試沒什么問題后,就發布到線上,由于平時網站的流量不算非常高,所以運行了幾天也沒發生什么異常,直到今天早上,擁有幾十萬粉絲的公眾號發推文,推文的內容直接鏈接到網站,因此說瞬間流量是非常高。 


運行了大約十分鐘之后,運營突然發瘋的過來說網站訪問非常慢,甚至出現錯誤碼,心里一慌,趕緊上去看日志,我了個乖乖啊,簡直是嚇人,error日志想流水一樣蹦出來,但五一不例外都是下面圖示的錯誤:從Redis池中獲取不大連接數,馬上上redis服務器查看,發現CPU已經到達了100%以上。 


能讓Redis的CPU到100%的,我想出了一下幾個可能:

  1. 連接數過多,占用連接的時間過長
  2. 存儲的值過大,存取均很占用CPU和內存
  3. 慢查詢,事其它操作等待時間超時
  4. redis阻塞,某個操作把Redis阻塞,導致CPU飆升

由于項目上線時間已經很久,前三個可能基本都在平時查看Redis服務器性能的過程中排除掉,因此很大概率是第四個,突然想起前幾天做的功能,有個模糊查詢,該不是這個問題吧?我到網站輸入“Redis 模糊查詢 性能”,出來非常多關于redis模糊查詢性能急劇下降的的情況,而且建議生產環境下禁用redis的模糊查詢,于是我把模糊查詢這塊業務直接注釋掉,重新上線,運行了半天,再沒出現這個問題,因此可以斷定就是模糊查詢搞的鬼。

【替代方案】

有問題肯定是要解決的,既然模糊查詢行不通的,那就得想別的辦法達到目的,想到Redis有Set這這種存儲結構,因此可以把用戶的所有cookie key都放到一個用戶專屬的Set中,每次用戶登錄成功之后,都把之前Set里的cookie key清除,然后再把***的key放進去,這樣就可以達到同樣的目的了。 

  1. String setKey = "prefix_customer_cookie_list_10920"
  2.        String token="ss2ssssss"
  3.         //取出所有的用戶的cookie key 
  4.         Set<String> list = RedisApi.getSet(setKey); 
  5.        if (list != null && list.size() > 0) { 
  6.             //刪除用戶所有的cookie key 
  7.             RedisApi.removeFromSet(setKey, list.toArray(new String[0])); 
  8.         } 
  9.        //把***的cookie key加入到Set中 
  10.         RedisApi.addSet(setKey, token); 

 

責任編輯:龐桂玉 來源: 數據庫開發
相關推薦

2022-09-04 21:17:03

高可用Linkerd

2011-09-19 10:43:19

Nuget

2020-02-25 15:47:05

ElasticsearLucene地方

2021-12-03 07:27:29

EFCore生產環境

2015-10-28 16:20:10

短生命周期容器原生云計算

2020-12-25 09:00:00

Kubernetes容器開發

2009-06-25 16:45:31

Hibernate

2015-08-03 09:08:29

2020-09-14 15:30:23

開發技能代碼

2019-09-18 20:46:57

容器生產環境數據中心

2020-09-14 07:35:40

Redis命令框架

2023-11-14 17:40:32

2022-05-26 09:00:00

網站抓取Lightrun開發

2011-05-20 10:05:13

Oracle性能優化

2009-04-24 10:49:57

Oracle性能優化錯誤

2012-02-07 09:56:06

無代理防毒產品

2010-09-08 15:19:46

生產環境性能測試風險

2024-08-14 14:20:00

2021-03-10 07:20:42

Redis命令數據

2010-10-29 16:41:12

Oracle模糊查詢
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: av色站| 亚洲色图综合网 | 欧美一区二区免费 | 成年人在线视频 | 中文字幕成人 | 日韩资源| 国产四虎 | 欧美日韩国产免费 | 久久久久久久久久久久久九 | 中文字幕视频在线观看 | 夜夜操天天干 | 狠狠色狠狠色综合系列 | 一区二区三区精品视频 | 欧美午夜激情在线 | 黄色成人免费看 | 日韩福利在线 | 国产1区2区在线观看 | 欧美一区二区三区久久精品 | 国产一区二区在线免费 | 国产福利在线小视频 | 精品一级 | 狠狠操狠狠操 | 干干干操操操 | 欧美一区免费 | 久久久久网站 | 天堂在线中文字幕 | 亚洲精品免费观看 | 三极网站 | 97日日碰人人模人人澡分享吧 | 国产精品九九九 | 亚洲精品一区二区冲田杏梨 | 欧美国产一区二区三区 | 国产一区二区三区精品久久久 | 亚洲精品自在在线观看 | 成人精品一区二区三区四区 | 久久久亚洲一区 | 亚洲一区二区免费 | 成人国产精品久久久 | 91精品国产91久久久久久吃药 | 综合国产 | 色婷婷综合久久久中字幕精品久久 |