Amazon Redshift クラスターがメンテナンス期間外に再起動しました。
簡単な説明
Amazon Redshift クラスターがメンテナンス期間外で再起動する理由は次のとおりです。
- Amazon Redshift がクラスターに問題を検出した。
- Amazon Redshift がクラスター内の障害があるノードを交換した。
メンテナンス期間外で発生するクラスターの再起動について通知を受けるには、イベント通知サブスクリプションを作成してください。イベント通知は、クラスターをソースタイプとして指定した場合にも通知できます。詳細については、『Amazon Redshift クラスターイベント通知のサブスクリプション』を参照してください。
解決策
Amazon Redshift がクラスターの問題を検出した
次の問題が原因で、クラスターが再起動する可能性があります。
以前のドライバーバージョンに起因するメモリ不足エラー
以前のドライバーバージョンを使用しており、クラスターが頻繁に再起動する場合は、最新の Java Database Connectivity (JDBC) ドライバーバージョンをダウンロードしてください。本番環境で使用する前に、開発環境でドライバーバージョンをテストすることはベストプラクティスです。
ヘルスチェッククエリの失敗
Amazon Redshift は、コンポーネントの可用性を継続的にモニタリングします。ヘルスチェックに失敗すると、Amazon Redshift はダウンタイムを削減するために、クラスターをできるだけ早く正常な状態に戻すための再起動を開始します。
ほとんどのヘルスチェックの失敗は、クラスターに長時間実行されているオープントランザクションがある場合に発生します。Amazon Redshift が長時間実行されているトランザクションに関連するメモリをクリーンアップしているときに、クラスターがロックアップする可能性があります。この問題を防ぐには、クローズされていない接続とトランザクションをモニタリングすることはベストプラクティスです。
長時間実行されているオープン接続をモニタリングするには、次のクエリ例を実行します。
select s.process as process_id,
c.remotehost || ':' || c.remoteport as remote_address,
s.user_name as username,
s.db_name,
s.starttime as session_start_time,
i.starttime as start_query_time,
datediff(s,i.starttime,getdate())%86400/3600||' hrs '||
datediff(s,i.starttime,getdate())%3600/60||' mins ' ||
datediff(s,i.starttime,getdate())%60||' secs 'as running_query_time,
i.text as query
from stv_sessions s
left join pg_user u on u.usename = s.user_name
left join stl_connection_log c
on c.pid = s.process
and c.event = 'authenticated'
left join stv_inflight i
on u.usesysid = i.userid
and s.process = i.pid
where username <> 'rdsdb'
order by session_start_time desc;
長時間実行されている未処理トランザクションをモニタリングするには、次のクエリ例を実行します。
select *,datediff(s,txn_start,getdate())/86400||' days
'||datediff(s,txn_start,getdate())%86400/3600||' hrs
'||datediff(s,txn_start,getdate())%3600/60||' mins
'||datediff(s,txn_start,getdate())%60||' secs' from svv_transactions
where lockable_object_type='transactionid' and pid<>pg_backend_pid() order by 3;
次に、次のクエリを実行してオープントランザクションを確認します。
select * from svl_statementtext where xid = order by starttime, sequence;
アイドルセッションを終了し、接続を解放するには、PG_TERMINATE_BACKEND 関数を使用してください。
Amazon Redshift がクラスター内の障害のあるノードを交換した
各 Amazon Redshift ノードは、別々の Amazon Elastic Compute Cloud (Amazon EC2) インスタンス上で実行されます。障害があるノードとは、監視プロセス中にハートビートシグナルに応答しないインスタンスです。ハートビートシグナルにより、Amazon Redshift クラスター内のコンピューティングノードの可用性を定期的にモニタリングしています。
ハードウェアの問題または障害を検出すると、Amazon Redshift は次のメンテナンス期間中に自動的にノードを交換します。ただし、ただし、クラスターが正常に動作し続けられるように、Amazon Redshift が障害のあるノードを直ちに交換する場合もあります。
次の問題により、Amazon Redshift がクラスターノードを交換する可能性があります。
- インスタンスのハードウェアに根本的な問題があるか、自動ヘルスチェックが失敗したため、EC2 インスタンスが応答しない。
- ノード上のディスクに問題がある。
- 断続的に発生するネットワーク通信障害、または基盤ホストの問題により、ノード間の通信障害が発生する可能性があります。
- ノードまたはクラスターの検出がタイムアウトします。
- 過負荷状態のノードにより、メモリ不足 (OOM) の問題が発生します。