【復旧済み】Microsoft Azureで障害が発生しております。

いつもEveridaysをご利用いただきありがとうございます。

​

日本マイクロソフト社より連絡があり、Microsoft Azureの日本リージョンで障害が発生しております。

​

【影響】

すべてのお客様において、

Everidaysへの接続およびEveridaysにおけるすべての動作（操作）が不安定となります。

​

【状況】

13:50頃

ワークスペースの作成ができない事象を検出しました。

同時刻、一部のお客様から同事象の問合せも受けております。

即刻、開発チームにて調査を開始しました。

​

14:00頃

当社開発チームの調査の結果、インフラ側に不具合の兆候が見られたため、Microsoft Azureサポートに問い合わせ、確認を実施しました。

​

15:12

Microsoft Azureサポート側より、ストレージサービスにおいて接続Busyの状態が発生している旨の回答がありました。

引き続き、Microsoft Azure側と連携し、解決に努めてまいります

​

16:11

Microsoft Azureサポートより日本リージョンの特定のテナントで障害が発生している旨の連絡を受けました。

​

16:30

Microsoft Azure側で復旧作業を実施中の状況でございます。

​

17:08

Microsoft Azure側で復旧作業を継続中との連絡を受けました。

​

18:47

Microsoft Azure側で復旧作業を継続中との連絡を受けました。

​

20:30

Microsoft Azure側で復旧作業を継続中との連絡を受けました。

​

22:00

Microsoft Azure側で復旧作業を継続中との連絡を受けました。

​10/4（金）の当該記事の更新はこれで終了となります。

10/5（土）以降、Microsoft Azure側から復旧完了の連絡が入り次第、当該記事でお知らせいたします。

本日は大変ご迷惑をおかけし、申し訳ございませんでした。

​

0:22

Microsoft Azureサポートから、当該事象の対応が完了し、復旧したとの回答がありました。

​

​

​

​2024/11/5(火)

当該事象について日本マイクロソフト社から以下の報告を受けましたので、お客様にご報告いたします。

​

【問題の概要、原因等】

日本リージョンの一つのスケールユニットにおいてバックエンド操作の過負荷にともなうプラットフォームの障害が発生しました。

これは、リージョン間の負荷分散操作の処理が進行中である間に、内部サービスが予期しない呼び出しシーケンスを使用したことによって引き起こされ、システムに意図しない負荷がかかりました。

その結果、影響を受けたシステムは、Azure Storageに関連するお客様のトラフィックの処理ができず、サービスの遅延と失敗が発生しました。

​

通常の状況では、内部サービスは交差または重複するリクエスト処理が発生しないように間隔を空けて配置されています。

問題は、内部サービスからの一連の呼び出しが外部リクエスト処理と意図せず交差したことから発生しました。

​

​

【今後の対応について】

同社より、2025年3月を目途に以下を実施する旨の連絡を受けております。

​

・外部向け操作と内部向け操作の間で処理スタックの分離を導入していきます。

・お客様向け操作の進行状況と動作状況のさらなる追跡を導入していきます。

・内部サービスで使用されるサービス呼び出しを再構築し、外部操作と交差することなくシステムが処理できるようにします。

・お客様のトラフィックをサポートするコンポーネントおよびサービスでの内部サービス間操作の受け入れに対する監視をさらに強化していきます。

・スケールユニットに対して予期しない呼び出しを行っていた内部サービスの運用慣行、可観測性、およびテレメトリの追加レビューを実施しています。

​

​

この度はご迷惑をお掛けし、申し訳ございませんでした。

引き続き日本マイクロソフト社と連携し、Everidaysサービスの安定稼働に努めてまいります。

​