Redis實現(xiàn)UV統(tǒng)計的示例代碼
一、HyperLogLog
1、為什么用HyperLogLog
先介紹兩個概念：
UV：全稱 Unique Visitor，也叫獨立訪客量，是指通過互聯(lián)網(wǎng)訪問、瀏覽這個網(wǎng)頁的自然人、1 天內(nèi)同一個用戶多次訪問該網(wǎng)站，只記錄 1 次。
PV：全稱 Page View，也叫頁面訪問量或點擊量，用戶每訪問網(wǎng)站的一個頁面，記錄一次 PV，用戶多次打開頁面，則記錄多次 PV。往往用來衡量網(wǎng)站的流量。
UV 統(tǒng)計在服務端做會比較麻煩，因為要判斷該用戶是否已經(jīng)統(tǒng)計過了，需要將統(tǒng)計過的用戶信息保存。但是如果每個訪問的用戶都保存到Redis 中，數(shù)據(jù)量會非?？植?。
那么我們要怎么更好的記錄呢？就用到 HyperLogLog
2、HyperLogLog是什么
HyperLogLog（HLL）是從 Loglog 算法派生的概率算法，用于確定非常大的集合的基數(shù)，而不需要存儲其所有值。
Redis 中的 HLL 是基于 String 結(jié)構(gòu)實現(xiàn)的，單個 HLL 的內(nèi)存永遠小于 16kb，內(nèi)存占用低的令人發(fā)指！作為代價，其測量結(jié)果是概率性的，有小于 0.81% 的誤差。不過對于 UV 統(tǒng)計來說，這完全可以忽略。
不管加入多少重復元素，HyperLogLog都只記錄一次，天生適合做uv的統(tǒng)計
二、實現(xiàn)UV統(tǒng)計
我們直接用單元測試，向 HyperLogLog 中添加 100 萬條數(shù)據(jù)，看看內(nèi)存占用和統(tǒng)計效果如何：
@Test
void testHyperLogLog() {
String[] values = new String[1000];
int j = 0;
for (int i = 0; i < 1000000; i++) {
j = i % 1000;
values[j] = "user_" + i;
if(j == 999){
// 發(fā)送到 Redis
stringRedisTemplate.opsForHyperLogLog().add("hl2", values);
}
}
// 統(tǒng)計數(shù)量
Long count = stringRedisTemplate.opsForHyperLogLog().size("hl2");
System.out.println("count = " + count);
}測試結(jié)果：
我們統(tǒng)計出來的數(shù)據(jù)跟100萬非常接近，誤差在0.02。而且發(fā)現(xiàn)內(nèi)存只消耗了14kb非常非常低
到此這篇關(guān)于Redis實現(xiàn)UV統(tǒng)計的示例代碼的文章就介紹到這了,更多相關(guān)Redis UV統(tǒng)計內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
本文主要介紹了Redis RDB快照持久化及寫操作禁止問題排查與解決,由于?stop-writes-on-bgsave-error?選項處于啟用狀態(tài),所以寫操作被禁止,下面就來介紹一下,感興趣的可以了解一下2025-04-04
排行榜功能是一個很普遍的需求。使用 Redis 中有序集合的特性來實現(xiàn)排行榜是又好又快的選擇。接下來通過本文給大家介紹使用Redis實現(xiàn)實時排行榜功能,需要的朋友可以參考下2021-07-07
這篇文章主要介紹了Redis慢查詢?nèi)罩九c監(jiān)視器問題，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2022-12-12
基于?Spring?Aop?環(huán)繞通知實現(xiàn)?Redis?緩存雙刪功能(示例代碼)
基于 spring aop 常規(guī)應用場景多是用于日志記錄以及實現(xiàn) redis 分布式鎖，在 github 中也有項目是把它拿來當作緩存的異常捕捉，這篇文章主要介紹了基于?Spring?Aop?環(huán)繞通知實現(xiàn)?Redis?緩存雙刪,需要的朋友可以參考下2022-08-08
SCAN 命令是一個基于游標的迭代器，每次被調(diào)用之后， 都會向用戶返回一個新的游標， 用戶在下次迭代時需要使用這個新游標作為 SCAN 命令的游標參數(shù)， 以此來延續(xù)之前的迭代過程，這篇文章給大家介紹了Redis?SCAN命令的相關(guān)知識，感興趣的朋友一起看看吧2022-07-07
Redis連接命令主要是用于客戶端與服務器建立連接的,Redis是一種流行的內(nèi)存數(shù)據(jù)庫,支持多種數(shù)據(jù)結(jié)構(gòu),其中鍵命令是核心操作之一,在Redis中,鍵（Key）是用來存儲數(shù)據(jù)的主要元素,每個鍵都有一個唯一的名稱,本文給大家介紹了Redis中的連接命令與鍵命令操作2024-09-09
文章總結(jié)了Redis緩存的六種常見問題及其解決方案：緩存穿透、緩存擊穿、緩存雪崩、熱點key重建優(yōu)化、緩存和數(shù)據(jù)庫雙寫不一致,以及Redis對過期key的三種清除策略,每種問題都提供了詳細的原因分析和具體的解決方案2025-01-01
Zset是Redis的一種有序集合數(shù)據(jù)類型,Zset通過壓縮列表和跳躍表兩種底層編碼方式支持小數(shù)據(jù)集和大數(shù)據(jù)集,支持多種操作,包括添加、查詢、刪除元素以及集合運算等,具有不同的時間復雜度,感興趣的可以了解一下2024-10-10
Redis緩沖區(qū)溢出是指Redis緩沖區(qū)被寫入的數(shù)據(jù)超過了它的容量，導致數(shù)據(jù)無法存儲或被覆蓋。造成緩沖區(qū)溢出的原因可能是快速寫入大量數(shù)據(jù)、緩沖區(qū)未及時刷新或Redis服務器配置不當?shù)取?/div> 2023-04-04
Redis 分片集群是一種將 Redis數(shù)據(jù)庫分散到多個節(jié)點上的方式,以提供更高的性能和可伸縮性,本文主要介紹了Redis分片集群的實現(xiàn),具有一定的參考價值,感興趣的可以了解一下2025-04-04最新評論