基于C# 寫(xiě)一個(gè) Redis 數(shù)據(jù)同步小工具

更新時(shí)間：2020年02月06日 09:21:47 作者：返回主頁(yè) Love it or leave it

Redis支持主從同步。數(shù)據(jù)可以從主服務(wù)器向任意數(shù)量的從服務(wù)器上同步，從服務(wù)器可以是關(guān)聯(lián)其他從服務(wù)器的主服務(wù)器。這篇文章主要介紹了用 C# 寫(xiě)一個(gè) Redis 數(shù)據(jù)同步小工具,需要的朋友可以參考下

概念

　　Redis是一個(gè)開(kāi)源的使用ANSI C語(yǔ)言編寫(xiě)、支持網(wǎng)絡(luò)、可基于內(nèi)存亦可持久化的日志型、Key-Value數(shù)據(jù)庫(kù)，和Memcached類(lèi)似，它支持存儲(chǔ)的value類(lèi)型相對(duì)更多，包括string(字符串)、list(鏈表)、set(集合)、zset(sorted set --有序集合)和hash（哈希類(lèi)型）。在此基礎(chǔ)上，redis支持各種不同方式的排序。與memcached一樣，為了保證效率，數(shù)據(jù)都是緩存在內(nèi)存中。區(qū)別的是redis會(huì)周期性的把更新的數(shù)據(jù)寫(xiě)入磁盤(pán)或者把修改操作寫(xiě)入追加的記錄文件，并且在此基礎(chǔ)上實(shí)現(xiàn)了master-slave(主從)同步。

　　Redis支持主從同步。數(shù)據(jù)可以從主服務(wù)器向任意數(shù)量的從服務(wù)器上同步，從服務(wù)器可以是關(guān)聯(lián)其他從服務(wù)器的主服務(wù)器。這使得Redis可執(zhí)行單層樹(shù)復(fù)制。存盤(pán)可以有意無(wú)意的對(duì)數(shù)據(jù)進(jìn)行寫(xiě)操作。

Intro#

為了實(shí)現(xiàn) redis 的數(shù)據(jù)遷移而寫(xiě)的一個(gè)小工具，將一個(gè)實(shí)例中的 redis 數(shù)據(jù)同步到另外一個(gè)實(shí)例中。(原本打算找一個(gè)已有的工具去做，找了一個(gè) nodejs 的小工具，結(jié)果折騰了好久都沒(méi)裝上。。。于是就自己寫(xiě)了這個(gè)小工具）

之所以自己寫(xiě)一個(gè)工具而不是利用 redis 備份機(jī)制來(lái)實(shí)現(xiàn)，主要是因?yàn)槲覀冇玫氖?redis 云服務(wù)，不能像自己的服務(wù)器一樣 SSH 上去一頓操作，要把云服務(wù)的 redis 數(shù)據(jù)同步到自己服務(wù)器上的 redis 實(shí)例。

基本使用#
配置解讀#

{
 "AppSettings": {
  "SyncDatabases": "0,1",
  "BatchSize": 50
 },
 "ConnectionStrings": {
  "Source": "redis1:6379,asyncTimeout=30000,syncTimeout=30000",
  "Dest": "redis2:6379,password=123433,asyncTimeout=30000,syncTimeout=30000"
 }
}

AppSettings:SyncDatabases是要同步的 redis 數(shù)據(jù)庫(kù)，多個(gè)數(shù)據(jù)庫(kù)用英文的逗號(hào)分隔
AppSettings:BatchSize 是每次從源 redis 服務(wù)器讀取 N 個(gè) key（分頁(yè)讀取，每頁(yè) N 個(gè)）
ConnectionStrings:Source 代表了源 redis 服務(wù)器連接字符串
ConnectionStrings:Dest 代表了目標(biāo) redis 服務(wù)器連接字符串

redis 連接字符串詳細(xì)參數(shù)可以參考文檔：https://weihanli.github.io/StackExchange.Redis-docs-zh-cn/Configuration.html

執(zhí)行遷移#

修改 redis 配置之后（根據(jù)自己要同步數(shù)據(jù)量的大小設(shè)置超時(shí)時(shí)間），在項(xiàng)目根目錄下運(yùn)行 dotnet run 即可，

Sample Run#