幾種redis數據導出導入方式

幾種redis數據導出導入方式

1 環境說明：

192.168.1.101 node1 redis源實例
192.168.1.102 node2 redis目標實例
192.168.1.103 node3 任意linux系統

2 redis-dump方式

2.1 安裝RVM

redis-dump這款工具需要用到Ruby，而centos環境中的yum工具可以安裝的Ruby版本最高是2.0的版本，而當前Redis最新的4.0版本中需要用到的Ruby >= 2.2版本，所以我們需要先安裝Ruby，而安裝Ruby有一個很好的命令行工具可以幫助我們，這款工具就是RVM，RVM可以提供一個便捷的多版本 Ruby 環境的管理和切換。

首先到tmp下，用來存放下載的安裝文件
cd /tmp
mkdir rvm
cd rvm
# 開始安裝RVM
gpg --keyserver hkp://keys.gnupg.net --recv-keys 409B6B1796C275462A1703113804BB82D39DC0E3 
curl -O https://raw.githubusercontent.com/rvm/rvm/master/binscripts/rvm-installer 
curl -O https://raw.githubusercontent.com/rvm/rvm/master/binscripts/rvm-installer.asc 
gpg --verify rvm-installer.asc 
bash rvm-installer stable 
source /etc/profile.d/rvm.sh

2.2 安裝Ruby

查看可以安裝的Ruby版本

rvm list known

這里我們安裝2.4.1

rvm install ruby 2.4.1 

設置默認ruby

rvm use 2.4.1 --default

查看ruby版本

ruby --version

2.3 安裝redis-dump工具

移除gem自帶源（美國服務器下載慢）

gem sources --remove https://rubygems.org/ 

添加國內源

gem sources -a https://gems.ruby-china.com

查看倉庫源

gem sources -l
*** CURRENT SOURCES ***

http://gems.ruby-china.com/

安裝redis-dump

gem install redis-dump -V

安裝redis-dump包括的gem包

drydock-0.6.9.gem
uri-redis-0.4.2.gem
yajl-ruby-1.4.1.gem
redis-dump-0.4.0.gem

2.4 redis-dump導出

redis-dump幫助命令

[root@node3 ~]# redis-dump --help
  Try: /usr/local/bin/redis-dump show-commands
Usage: /usr/local/bin/redis-dump [global options] COMMAND [command options]
    -u, --uri=S                      Redis URI (e.g. redis://hostname[:port])
    -d, --database=S                 Redis database (e.g. -d 15)
    -a, --password=S                 Redis password (e.g. -a 'my@pass/word')
    -s, --sleep=S                    Sleep for S seconds after dumping (for debugging)
    -c, --count=S                    Chunk size (default: 10000)
    -f, --filter=S                   Filter selected keys (passed directly to redis' KEYS command)
    -b, --base64                     Encode key values as base64 (useful for binary values)
    -O, --without_optimizations      Disable run time optimizations
    -V, --version                    Display version
    -D, --debug
        --nosafe
[root@node3 ~]#

導出命令

redis-dump -u 192.168.1.101:6379 > 192.168.1.101.json

導出指定數據庫數據

redis-dump -u 192.168.1.101:6379 -d 5 > 192.168.1.101.json

如果redis設有密碼

redis-dump -u :password@192.168.1.101:6379 > 192.168.1.101.json

redis-dump導出當前節點的所有keys；當redis 為cluster時，需要分別導出所有master的keys；

2.5 redis-load導入命令

[root@node3 ~]# redis-load --help
  Try: /usr/local/bin/redis-load show-commands
Usage: /usr/local/bin/redis-load [global options] COMMAND [command options]
    -u, --uri=S                      Redis URI (e.g. redis://hostname[:port])
    -d, --database=S                 Redis database (e.g. -d 15)
    -a, --password=S                 Redis password (e.g. -a 'my@pass/word')
    -s, --sleep=S                    Sleep for S seconds after dumping (for debugging)
    -b, --base64                     Decode key values from base64 (used with redis-dump -b)
    -n, --no_check_utf8
    -V, --version                    Display version
    -D, --debug
        --nosafe
[root@node3 ~]#

redis-load導入

cat 192.168.1.101.json | redis-load -u 192.168.1.102:6379

# 或者
< 192.168.1.101.json redis-load -u 192.168.1.102:6379

3 aof導入方式

3.1 源實例生成aof數據

# 清空上文目標實例全部數據
[root@node1 ~]# redis-cli -h 192.168.1.102 -a password flushall
OK
# 源實例開啟aof功能，將在dir目錄下生成appendonly.aof文件
[root@node1 ~]# redis-cli -h 192.168.1.101 -a password config set appendonly yes
OK

3.2 目標實例導入aof數據

# 假設appendonly.aof就在當前路徑下
[root@node1 ~]# redis-cli -h 192.168.1.102 -a password --pipe < appendonly.aof
All data transferred. Waiting for the last reply...
Last reply received from server.
errors: 0, replies: 5
# 源實例關閉aof功能
[root@node1 ~]# redis-cli -h 192.168.1.101 -a password config set appendonly no
OK

4 rdb文件遷移方式

暫略

5 源實例db0遷移至目標實例db1

[root@node1 ~]# cat redis_mv.sh
#!/bin/bash
redis-cli -h 192.168.1.101 -p 6379 -a password -n 0 keys "*" | while read key
do
    redis-cli -h 192.168.1.101 -p 6379 -a password -n 0 --raw dump $key | perl -pe 'chomp if eof' | redis-cli -h 192.168.1.102 -p 6379 -a password -n 1 -x restore $key 0
    echo "migrate key $key"
done