ErastiCache for RedisでFailOverが発生すると何がおこるのか？のまき

これからタイトルどおりのお話をするのですが、Multi-AZ構成を取っていたとしても何がおこるか知らない人多いんじゃないでしょうか？AWSのドキュメント見ても、挙動の記載が無いのです。

結論から言うと、２パターンあります。

1. Read Replicaがprimaryに昇格し、旧primaryはread replicaとして同期
2. 自身の持っているイメージからデータを復元（read Replicaが使えない場合）

1から説明しますと、Multi-AZのRead Replicaが存在する場合は素直に切り替わります。これはDNSで切り替わるため、Ｐrimary Endpointに紐付いたNodeが、新しいprimaryに切り替わリます。その際、降格したread replicaはデータが空の状態で同期を開始します。

問題は2です。primaryがread replicaに降格するのですが、そのタイミングでデータをローカルにバックアップします。正確に言うと、こんなかんじの流れです。

1. 障害検知したタイミングで、データをローカルにバックアップ
2. 再起動
3. データが空の状態でredisが起動
4. 新primaryに問題ない場合はread replicaとして起動し、primaryからデータ同期
5. 新primaryに問題がある場合はprimaryとして起動し、1.からデータを復元

何が問題か？という話なのですが、１～５の間は『read,writeがロックされた状態』になります。つまり長時間redisにアクセス出来ない状態になります。

…大変っすね！