マイクロソフト、AzureやMicrosoft 365などに影響した先週の大規模障害の原因報告。WAN内の全ルータが再計算状態に突入し、パケット転送が不可に － Publickey

40コメント 2023-02-01 01:05｜Publickey

マイクロソフトは、日本時間で先週の1月25日午後4時頃から最大で約5時間半に渡り、Microsoft AzureやMic...

ツイッターのコメント(40)

BGPのミスりやすいのに、影響範囲が大きすぎる問題はどうにかならんのかな…。
Koji ロイロノートCEO(@loilokoji) - 02/07
えー、PCもスマホもOffice製品はその後もずっと調子悪いですけど…
continentalop(@maxthaler) - 02/04
今回も色々ある。「設定変更のためにあるルーターにコマンドを送ったところ、そのルーターがWAN内の...」 /
Yasushi Usami(@usami2go) - 02/04
対策がキツそうな障害。
sakuya877(@sakuya877) - 02/04
ありとあらゆるマイクロサービスを全滅させてそうで凄い。
トトス@英語勉強アカウント(@oza_shu) - 02/04
この間のMSのあれはこんなんだったんか…
しらたま(@tama_shira) - 02/02
たしかdocomo、auの通信障害も設定変更ミスだったような

通信系、いつにトラブルが起こってもおかしくないな
しょう@エンタメ垢(@syou_syou) - 02/02
えぐすぎやでーい
yop(@No_no_b0y) - 02/02
自分らで引き起こしてたのね(๑´•.̫ • `๑)
Zott(@zottdx) - 02/02
そんな事あるーたー
Chihiro Fukazawa(@query1000) - 02/02
トラフィックがガッツリ乗ってる時に大規模なルーティング再計算は地獄だな(たぶんOSPFかな)
ラミレス・シュタイナー伍長(@cpl_x) - 02/01
(｡･ω･｡)ﾉ 365などに影響した先週の大規模障害の原因報告。WAN内の全ルータが再 .
tr398⛅(@tr398) - 02/01
超大規模は設定変更の影響が多いなぁ、、設定漏れでデータ漏えいと同じくこっちも何とかして欲しいよね
いもいもくん(@ma_anago) - 02/01
ただの「自滅」

①設定変更のためにルーターにコマンドを送った
②そのルーターがWAN内のすべてのルーターに対して誤ったメッセージを送信
③その結果、WAN内のすべてのルーターが、適切にパケットを転送できなくなった

担当は真っ青だったかと　ドンマイだ(笑)
jp(@yzjps) - 02/01
どんなコマンドだろうw
ｵ ﾔ ﾁﾞ ﾆ ｱ '23(83/365)(@oyageng) - 02/01
ルーターの不具合っぽいね。MSでも検証せずに導入とかやるんだな。ここら辺のプロセスはやってるもんだと：
TOR.(@tor_sh) - 02/01
まあ、2000年くらいから感じてたことかな。
IPやEthernetに関する最低限の知識がないがしろにされてるの。
2002年頃にはIXのルーターの取り扱いのミスで、日本のインタネットが二つに分かれたよね。
ナマポ - Take2 - Dreamers Again(@takabsd) - 02/01
未検証のHWを基幹に導入するの、いくらなんでも無理では。
たはーま(@hmsn2602) - 02/01
仕事してたと思うのだけど、全然気づかなかった
shimamura(@shimamu57499317) - 02/01
経路計算がメモリやCPUに比べてギリ足りないくらいのボリュームになった感じだね...
kinneko(@kinneko) - 02/01
普通の人にルータ再計算とか言ってわかるのかよｗ
この障害結構起きるのよね😅
みこらいと(@mikolyte) - 02/01
ルータの設定変更コマンドを誤って全ルータに送信とな。
ヒューマンエラーなのかな？
りくすたっぺん(@t2basa) - 02/01
こういうことがあるからクラウドはやめよう、みたいな話がまあ毎回出ますが、「同じインシデントがオンプレなら起きないってことですか？」の問いはし続けたいよね。
やまゆ💝💯(@akai_inu) - 02/01
うWA-N ってことか /
りっちゃん(@rittyan) - 02/01
クラウドシステムそのものが結局 SPOF なっちゃうというのは、何とも悲惨な話だ。
空想猫(@xoinu) - 02/01
当事者は血の気がひいたろうな |
てもさわ(@6LR61YXJ) - 02/01
1ルーターの不具合なのかコマンドの誤った命令なのかよくわからないな…
詳報を待つか。
いぬうだ(@vourja) - 02/01
先週のMSの障害の詳細な報告があがってるね
ねないこだれだ(@inchikise) - 02/01
OSPFとか走ったんかな？

> 設定変更のためにあるルーターにコマンドを送ったところ、そのルーターがWAN内のすべてのルーターに対して誤ったメッセージを送信。その結果、WAN内のすべてのルーターが再計算状態に突入
りんだ(@rinda_1994) - 02/01
つらそう。こんな大規模なものには関わってないが、どちらかというと共感の方が先に立つ。
Norikichi(@dkstz) - 02/01
これやらかしたMS社員、夜眠れないだろうなぁ。
たては(@tatehab) - 02/01
ルーターの再登録が一斉に発生してパケット詰まったってのと似たような -
オオヤ@●|￣|＿(@daiginjo88) - 02/01
どこかの国のクラウドサービスみたいに、データ全消去とか無いだけマシだと思う。
カメラにゃんこ@お散歩主義(@camenyan) - 02/01
>"ルータが再計算状態に突入し"
考えただけでも恐ろしい……。
いざてん(@izaten) - 02/01
ルータの検証不備ってことかな？
よっこい@社内SE(@yokkoi1280) - 02/01
MS大規模障害の暫定ポストモーテムが出ていた。Publickeyさんが参考訳＆解説を出していた。オペレーションは1台だけに実施したっぽいけど、そこから他の全台にアカン命令が飛んで、全台で砂時計が回ったようだ（よくわかってない）
鈴木心之介(@sasasin_net) - 02/01
大変そうすぎる
GIGA野(@ginokentdev) - 02/01
先週の1/25にAzure、MS方面で発生していたネットワーク障害の速報。

2次被害の収束には少し時間を要したようだけど、問題箇所は7分で異常検知、1時間後には自動回復で復旧開始、2時間後には回復していたというのは凄いな。
Ryo Suzuki(@suzryo) - 02/01
先週のAzure/MS365の障害、なかなかファンキーな情報じゃのう…。WAN内の全てのルーターに誤ったメッセージが送信されたってどういう事象だろ。
ussvgr(@ussvgr) - 02/01
以上
　
PR
PR