ホスト型レンダリングのキュー待ち時間が増加
リリース起動のワークフロー実行が一気に集中し、EUのレンダープールが飽和しました。オートスケーリングが12分以内に容量を追加し、キューに入っていたジョブはデータ損失なく完了しました。その後、平日午後の事前確保容量の下限を引き上げています。
解決済みSCR-OPS/06
運用 / ライブステータス
ScreenLast Cloud、ホスト型レンダリング、配信のライブ稼働状況。加えて90日間の履歴。
15分を超えるすべてのインシデントについて、完全なポストモーテムを公開しています。
リリース起動のワークフロー実行が一気に集中し、EUのレンダープールが飽和しました。オートスケーリングが12分以内に容量を追加し、キューに入っていたジョブはデータ損失なく完了しました。その後、平日午後の事前確保容量の下限を引き上げています。
解決済みWebアプリのローリングデプロイが、新しいインスタンスがヘルスチェックを通過するより速く正常なインスタンスを取り除きました。デプロイは停止し、ロールバックしました。現在はインスタンスを入れ替える前に、キャッシュが温まるのを待つようデプロイ間隔を調整しています。
解決済み音声プロバイダーで地域的な障害が発生しました。ジョブは失敗ではなくキューに保持され、復旧後に自動で処理されました。合成リクエスト向けに、自動フォールバックとして2つ目のリージョンを追加しました。
解決済み