Redis 설치 및 Sentinel을 이용한 failover환경 구성하기

1
2
3
4
5
sudo apt update
sudo apt install build-essential
# systemd로 서비스관리를 원할 경우libsystemd-dev(Debian/Ubuntu) 혹은 systemd-devel(CentOS) 패키지 설치 필요
sudo apt install libsystemd-dev
# sudo yum -y install systemd-devel

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
# 소스 다운로드
curl -O https://download.redis.io/redis-stable.tar.gz
# or
wget https://download.redis.io/redis-stable.tar.gz

# 압축 해제
tar -xzvf redis-stable.tar.gz

cd redis-stable
# 소스 컴파일 및 설치, systemd 지원옵션은 필요여부에 따라 넣으면 됨
make USE_SYSTEMD=yes
sudo make PREFIX=/usr/local/redis-server install

# redis 및 sentinel의 config template 복사
sudo cp redis.conf sentinel.conf /usr/local/redis-server/

# log 디렉토리 생성
sudo mkdir /usr/local/redis-server/logs

1
2
sudo adduser --system --group --no-create-home redis
sudo chown -R redis:redis /usr/local/redis-server

1
sudo vim /usr/local/redis-server/redis.conf

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
# listening IP, 개발환경 같은 경우 편이성을 위하여 코멘트 처리 하거나 0.0.0.0으로 bind해도 되나
# 인터넷에 노출된 서버이거나 운영환경일 경우 보안을 고려하여 IP를 세팅해주자.
bind 172.25.254.131

# 워킹 디렉토리(working directory), rdb, aof파일이 저장되는 위치, Redis는 해당 경로에 대한 R/W권한이 필히 필요함.
dir /usr/local/redis-server/

# replication을 위하여 slave가 master에 접속시 사용되는 비번
# failover를 고려하여 master, slave 무관하게 masterauth, requirepass 같게 설정할것을 권장
masterauth mypass

# 비번설정, 다른 명령 실행시 "AUTH <PASSWORD>" 명령으로 인증후 실행가능.
requirepass mypass

# log파일 위치
logfile "/usr/local/redis-server/logs/redis.log"

# redis주기적으로 RDB(dump)파일을 떨구지만, 장애 발생시 미치 떨구지 못한 데이터는 유실되게 된다.
# 데이터 유실 최소화를 원한다면 AOF 기능을 사용할것을 권장한다.
appendonly yes

# appendonly가 yes로 설정했을때 적용되며, aof파일에 append(file sync)하는 주기를 뜻한다.
# no, always, everysec 3개의 옵션이 있으며, 
# no: 디스크에 쓰는 시점을 운영체제에 맡긴다
# always: 비권장 옵션이다. write명령이 실행될 때 마다 aof파일을 쓰므로 성능에 매우 영향을 준다.
# everysec: 데이터를 모아서 1초 마다 디스크에 쓴다. 성능과 데이터 보존측면에서 적절한 옵션이다. 판단이 어려울때 everysec권장
# If unsure, use "everysec".
appendfsync everysec

1
sudo vim /usr/local/redis-server/redis.conf

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
# listening IP, 개발환경 같은 경우 편이성을 위하여 코멘트 처리 하거나 0.0.0.0으로 bind해도 되나
# 인터넷에 노출된 서버이거나 운영환경일 경우 보안을 고려하여 IP를 세팅해주자.
bind 172.25.254.132

# 워킹 디렉토리(working directory), rdb, aof파일이 저장되는 위치, Redis는 해당 경로에 대한 R/W권한히 필히 필요함.
dir /usr/local/redis-server/

# replication을 위하여 slave가 master에 접속시 사용되는 비번
# failover를 고려하여 master, slave 무관하게 masterauth, requirepass 같게 설정할것을 권장
masterauth mypass

# 비번설정, 다른 명령 실행시 "AUTH <PASSWORD>" 명령으로 인증후 실행가능.
requirepass mypass

# master의 ip/port ( master만 해당옵션을 코멘트 처리해주자 )
replicaof 172.25.254.131 6379

# log파일 위치
logfile "/usr/local/redis-server/logs/redis.log"

# redis주기적으로 RDB(dump)파일을 떨구지만, 장애 발생시 미치 떨구지 못한 데이터는 유실되게 된다.
# 데이터 유실 최소화를 원한다면 AOF 기능을 사용할것을 권장한다.
appendonly yes

# appendonly가 yes로 설정했을때 적용되며, aof파일에 append(file sync)하는 주기를 뜻한다.
# no, always, everysec 3개의 옵션이 있으며, 
# no: 디스크에 쓰는 시점을 운영체제에 맡긴다
# always: 비권장 옵션이다. write명령이 실행될 때 마다 aof파일을 쓰므로 성능에 매우 영향을 준다.
# everysec: 데이터를 모아서 1초 마다 디스크에 쓴다. 성능과 데이터 보존측면에서 적절한 옵션이다. 판단이 어려울때 everysec권장
# If unsure, use "everysec".
appendfsync everysec

1
sudo vim /usr/local/redis-server/redis.conf

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
# listening IP, 개발환경 같은 경우 편이성을 위하여 코멘트 처리 하거나 0.0.0.0으로 bind해도 되나
# 인터넷에 노출된 서버이거나 운영환경일 경우 보안을 고려하여 IP를 세팅해주자.
bind 172.25.254.133

# 워킹 디렉토리(working directory), rdb, aof파일이 저장되는 위치, Redis는 해당 경로에 대한 R/W권한히 필히 필요함.
dir /usr/local/redis-server/

# master의 ip/port ( master만 해당옵션을 코멘트 처리해주자 )
replicaof 172.25.254.131 6379

# replication을 위하여 slave가 master에 접속시 사용되는 비번
# failover를 고려하여 master, slave 무관하게 masterauth, requirepass 같게 설정할것을 권장
masterauth mypass

# 비번설정, 다른 명령 실행시 "AUTH <PASSWORD>" 명령으로 인증후 실행가능.
requirepass mypass

# log파일 위치
logfile "/usr/local/redis-server/logs/redis.log"

# redis주기적으로 RDB(dump)파일을 떨구지만, 장애 발생시 미치 떨구지 못한 데이터는 유실되게 된다.
# 데이터 유실 최소화를 원한다면 AOF 기능을 사용할것을 권장한다.
appendonly yes

# appendonly가 yes로 설정했을때 적용되며, aof파일에 append(file sync)하는 주기를 뜻한다.
# no, always, everysec 3개의 옵션이 있으며, 
# no: 디스크에 쓰는 시점을 운영체제에 맡긴다
# always: 비권장 옵션이다. write명령이 실행될 때 마다 aof파일을 쓰므로 성능에 매우 영향을 준다.
# everysec: 데이터를 모아서 1초 마다 디스크에 쓴다. 성능과 데이터 보존측면에서 적절한 옵션이다. 판단이 어려울때 everysec권장
# If unsure, use "everysec".
appendfsync everysec

1
sudo vim /etc/systemd/system/redis-server.service

1
2
3
4
5
6
7
8
9
10
11
12
13
14
● redis-server.service - Redis data structure server
     Loaded: loaded (/etc/systemd/system/redis-server.service; disabled; vendor preset: enabled)
     Active: active (running) since Fri 2023-12-22 05:19:08 UTC; 6s ago
       Docs: https://redis.io/documentation
   Main PID: 48121 (redis-server)
     Status: "Ready to accept connections"
      Tasks: 6 (limit: 2178)
     Memory: 2.3M
        CPU: 19ms
     CGroup: /system.slice/redis-server.service
             └─48121 "/usr/local/redis-server/bin/redis-server *:6379" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" "" >

Dec 22 05:19:08 kafka-server1 systemd[1]: Starting Redis data structure server...
Dec 22 05:19:08 kafka-server1 systemd[1]: Started Redis data structure server.

1
2
cd /usr/local/redis-server/bin
./redis-cli -h 172.25.254.131

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
172.25.254.131:6379> auth mypass
OK
172.25.254.131:6379> info replication
# Replication
role:master
connected_slaves:2
slave0:ip=172.25.254.133,port=6379,state=online,offset=95561,lag=0
slave1:ip=172.25.254.132,port=6379,state=online,offset=95561,lag=0
master_failover_state:no-failover
master_replid:e396c5f17b331fc17d89f9c03e27e8a4548214f9
master_replid2:b950d0774916c8901184640d4652864788e2a51e
master_repl_offset:95561
second_repl_offset:94277	
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:94277
repl_backlog_histlen:1285

1
2
# 두대의 slave상태 각각 확인
./redis-cli -h 172.25.254.132

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
172.25.254.132:6379> auth mypass
OK
172.25.254.132:6379> info replication
# Replication
role:slave
master_host:172.25.254.131
master_port:6379
master_link_status:up
master_last_io_seconds_ago:3
master_sync_in_progress:0
slave_read_repl_offset:95603
slave_repl_offset:95603
slave_priority:100
slave_read_only:1
replica_announced:1
connected_slaves:0
master_failover_state:no-failover
master_replid:e396c5f17b331fc17d89f9c03e27e8a4548214f9
master_replid2:b950d0774916c8901184640d4652864788e2a51e
master_repl_offset:95603
second_repl_offset:94277
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:93577
repl_backlog_histlen:2027

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
# pid파일 위치
pidfile "/usr/local/redis-server/logs/redis-sentinel.pid"

# log파일 위치
logfile "/usr/local/redis-server/logs/sentinel.log"

# monitoring대상 master정보 및 O_DOWN판정(failover)에 필요한 최저 투표수
# sentinel monitor <master-name> <ip> <port> <quorum>
sentinel monitor mymaster 172.25.254.131 6379 2

# master비번
sentinel auth-pass mymaster mypass

# master S_DOWN판정 시간
sentinel down-after-milliseconds mymaster 6000

sentinel failover-timeout mymaster 180000

1
systemctl start redis-sentinel

1
systemctl status redis-sentinel

1
2
cd /usr/local/redis-server/bin
./redis-cli -p 26379 info sentinel

1
2
3
4
5
6
7
./bin/redis-cli
127.0.0.1:6379> auth mypass
OK
# debug명령은 redis.conf의 enable-debug-command옵션을 "local" 혹은 "yes"로 변경후 사용가능하다
127.0.0.1:6379> debug sleep 10
OK
(10.01s)