どうも、アズタケです。
本日は長時間に渡り緊急メンテナンスとなり、大変申し訳ございません。
今回発生した障害としては、メンテナンス作業中にデータベースサーバがダウンした際に、一部リクエスト・再生リスト情報が欠損してしまったことによる、整合性の不一致により、バックエンド/フロントエンド間で問題が発生していたことが原因です。
根本的解決として、欠損した部分を手動で入力していくという方針で進めようとしましたが、チャンネル機能であるコメントログ取得が正常に行えない等の作業トラブルにより復旧作業が長期化する可能性があるため
一時的な暫定的復旧として現行データベースのバックアップを取った状態で、一度データベースのリセットを行うこととなりました。
根本的復旧作業は、ログデータ等の解析を進めていき、データベースを結合することで対処する予定です。
(復旧作業を一時優先するため、運営タイムの追加を一時延期します)
今回のリセットによる影響は以下の通りです。
この度は視聴者の皆様には御不便をお掛けしましたこと、重ねてお詫び申し上げます。
今後ともよろしくお願いいたします。
(執筆: アズタケ)
P.S. 8/1以降も審査完了まで臨時チャンネルでの配信となりますが、継続して配信を行います。
本日は長時間に渡り緊急メンテナンスとなり、大変申し訳ございません。
今回発生した障害としては、メンテナンス作業中にデータベースサーバがダウンした際に、一部リクエスト・再生リスト情報が欠損してしまったことによる、整合性の不一致により、バックエンド/フロントエンド間で問題が発生していたことが原因です。
根本的解決として、欠損した部分を手動で入力していくという方針で進めようとしましたが、チャンネル機能であるコメントログ取得が正常に行えない等の作業トラブルにより復旧作業が長期化する可能性があるため
一時的な暫定的復旧として現行データベースのバックアップを取った状態で、一度データベースのリセットを行うこととなりました。
根本的復旧作業は、ログデータ等の解析を進めていき、データベースを結合することで対処する予定です。
(復旧作業を一時優先するため、運営タイムの追加を一時延期します)
今回のリセットによる影響は以下の通りです。
- WaitListがリセットされます
- 再生ログがリセットされます
この度は視聴者の皆様には御不便をお掛けしましたこと、重ねてお詫び申し上げます。
今後ともよろしくお願いいたします。
(執筆: アズタケ)
P.S. 8/1以降も審査完了まで臨時チャンネルでの配信となりますが、継続して配信を行います。
コメント
コメントを書く(ID:34684559)
復旧作業お疲れ様です。いつもありがとうございます。
(ID:26906638)
お疲れ様です!