麻豆小视频在线观看_中文黄色一级片_久久久成人精品_成片免费观看视频大全_午夜精品久久久久久久99热浪潮_成人一区二区三区四区

首頁(yè) > 數(shù)據(jù)庫(kù) > Redis > 正文

Redis實(shí)現(xiàn)唯一計(jì)數(shù)的3種方法分享

2020-02-17 14:56:38
字體:
來(lái)源:轉(zhuǎn)載
供稿:網(wǎng)友

唯一計(jì)數(shù)是網(wǎng)站系統(tǒng)中十分常見(jiàn)的一個(gè)功能特性,例如網(wǎng)站需要統(tǒng)計(jì)每天訪問(wèn)的人數(shù) unique visitor (也就是 UV)。計(jì)數(shù)問(wèn)題很常見(jiàn),但解決起來(lái)可能十分復(fù)雜:一是需要計(jì)數(shù)的量可能很大,比如大型的站點(diǎn)每天有數(shù)百萬(wàn)的人訪問(wèn),數(shù)據(jù)量相當(dāng)大;二是通常還希望擴(kuò)展計(jì)數(shù)的維度,比如除了需要每天的 UV,還想知道每周或每月的 UV,這樣導(dǎo)致計(jì)算十分復(fù)雜。

在關(guān)系數(shù)據(jù)庫(kù)存儲(chǔ)的系統(tǒng)里,實(shí)現(xiàn)唯一計(jì)數(shù)的方法就是 select count(distinct ),它十分簡(jiǎn)單,但是如果數(shù)據(jù)量很大,這個(gè)語(yǔ)句執(zhí)行是很慢的。用關(guān)系數(shù)據(jù)庫(kù)另外一個(gè)問(wèn)題是插入數(shù)據(jù)性能也不高。

Redis 解決這類(lèi)計(jì)數(shù)問(wèn)題得心應(yīng)手,相比關(guān)系數(shù)據(jù)庫(kù)速度更快,消耗資源更少,甚至提供了 3 種不同的方法。

1.基于 set

Redis 的 set 用于保存唯一的數(shù)據(jù)集合,通過(guò)它可以快速判斷某一個(gè)元素是否存在于集合中,也可以快速計(jì)算某一個(gè)集合的元素個(gè)數(shù),另外和可以合并集合到一個(gè)新的集合中。涉及的命令如下:


SISMEMBER key member? # 判斷 member 是否存在
SADD key member? # 往集合中加入 member
SCARD key?? # 獲取集合元素個(gè)數(shù)

基于 set 的方法簡(jiǎn)單有效,計(jì)數(shù)精確,適用面廣,易于理解,它的缺點(diǎn)是消耗資源比較大(當(dāng)然比起關(guān)系數(shù)據(jù)庫(kù)是少很多的),如果元素個(gè)數(shù)很大(比如上億的計(jì)數(shù)),消耗內(nèi)存很恐怖。

2.基于 bit

Redis 的 bit 可以用于實(shí)現(xiàn)比 set 內(nèi)存高度壓縮的計(jì)數(shù),它通過(guò)一個(gè) bit 1 或 0 來(lái)存儲(chǔ)某個(gè)元素是否存在信息。例如網(wǎng)站唯一訪客計(jì)數(shù),可以把 user_id 作為 bit 的偏移量 offset,設(shè)置為 1 表示有訪問(wèn),使用 1 MB的空間就可以存放 800 多萬(wàn)用戶的一天訪問(wèn)計(jì)數(shù)情況。涉及的命令如下:


SETBIT key offset value? # 設(shè)置位信息
GETBIT key offset??????? # 獲取位信息
BITCOUNT key [start end] # 計(jì)數(shù)
BITOP operation destkey key [key ...]? # 位圖合并

基于 bit 的方法比起 set 空間消耗小得多,但是它要求元素能否簡(jiǎn)單映射為位偏移,適用面窄了不少,另外它消耗的空間取決于最大偏移量,和計(jì)數(shù)值無(wú)關(guān),如果最大偏移量很大,消耗內(nèi)存也相當(dāng)可觀。

3.基于 HyperLogLog

實(shí)現(xiàn)超大數(shù)據(jù)量精確的唯一計(jì)數(shù)都是比較困難的,但是如果只是近似的話,計(jì)算科學(xué)里有很多高效的算法,其中 HyperLogLog Counting 就是其中非常著名的算法,它可以僅僅使用 12 k左右的內(nèi)存,實(shí)現(xiàn)上億的唯一計(jì)數(shù),而且誤差控制在百分之一左右。涉及的命令如下:


PFADD key element [element ...]? # 加入元素
PFCOUNT key [key ...]?? # 計(jì)數(shù)

這種計(jì)數(shù)方法真的很神奇,我也沒(méi)有徹底弄明白,有興趣可以深入研究相關(guān)文章。

redis 提供的這三種唯一計(jì)數(shù)方式各有優(yōu)劣,可以充分滿足不同情況下的計(jì)數(shù)要求。

發(fā)表評(píng)論 共有條評(píng)論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表

圖片精選

主站蜘蛛池模板: 精品一区二区在线播放 | 国产美女的小嫩bbb图片 | 国产99久久精品一区二区 | 视频毛片| 久久久久免费电影 | 国产一级毛片在线看 | www.国产一区.com | 亚洲av一级毛片特黄大片 | av在线1 | 大学生a级毛片免费视频 | 欧美成人高清视频 | 久久国产午夜 | 亚洲成年人免费网站 | 亚州综合| 九色中文字幕 | 毛片免费大全短视频 | 成人做爰s片免费看网站 | 男女羞羞视频 | 一级国产免费 | vidz 98hd | 毛片在线免费观看视频 | 久久精品亚洲欧美日韩精品中文字幕 | 少妇一级淫片免费放播放 | 少妇色诱麻豆色哟哟 | 精品国产一区二区三区在线观看 | av日韩一区二区三区 | 黄色1级视频| 成人黄色短视频在线观看 | 一级电影在线观看 | 国产午夜精品一区二区三区四区 | 久久国产精品久久久久久久久久 | 久草手机在线观看视频 | wwwxxx国产 | 欧美成视频在线观看 | 国产噜噜噜 | 久久久久久片 | 欧美日韩在线视频一区 | 欧美高清视频一区 | 久久99精品国产99久久6男男 | 男女污污视频网站 | 成人在线观看小视频 |