【東証トラブル】富士通「メモリー障害時に冗長化が機能しないようファームウエアを設定してた」

東京証券取引所で2020年10月1日に起きたシステム障害の全容が徐々に見えてきた。障害の原因は、富士通が納入したNAS（Network Attached Storage）のファームウエアの設定不備にあった。
2台構成のNASでメモリー故障に起因する障害パターンが発⽣した際、NASの冗長化が機能しない設定になっていた。

東証で10月1日に起きたシステム障害は、全銘柄の売買を終日停止するという未曽有の事態を招いた。
東証が取引を全面的にシステム化した1999年以降、システム障害で全銘柄の売買を終日止めたのは初めて。これにより、3兆円規模の売買機会が失われた。

NASのメモリー故障が発端
システム障害の発端は、東証の株式売買システム「arrowhead（アローヘッド）」のNASに搭載したメモリーの故障にあった。
業務サーバーで使うユーザー情報などを格納するNASは2台あり、Active-Active構成で冗長化していた。
このうちの1台のメモリーが故障し、本来なら1台のみの運用に自動で切り替わるはずが、うまくいかなかった。

原因はNASのファームウエアの切り替え用設定値の不備にあった。
東証はarrowheadを2019年11月に刷新する際、事前のテストで2台のNASの死活監視を途絶えさせて、自動で切り替わることを確認していた。
だがその際、今回の設定不備は見抜けなかった。設定作業そのものは富士通が実施していたという。

この記事は有料会員限定です。次ページでログインまたはお申し込みください。


https://xtech.nikkei.com/atcl/nxt/column/18/00001/04693/


https://cdn-xtech.nikkei.com/atcl/nxt/column/18/00001/04693/ph02.jpg

メモリーと言っているのに、目盛と思うジジ嫌い

定期点検してないの？
テストは？

ハード障害を想定したテスト項目の抽出漏れ、だよな。
テスト工数貰えなかったのかい？

冗長化という日本語を何とかしろや
わけわからんわ(´・ω・｀)

なるほど、つまり要約すればコンセントに足を引っかけた、と

まともな投資家は米国株しか触らんからね
日本株なんてどうでもいい

アクティブアクティブなら
1号2号同じ仕事してたのか

またまたご冗談を

NASのメモリ異常のテストとか、出来んわな

🍆はやめとけって言ったろ

冗長化＝バックアップシステム

鯖管「ようやく俺たちの必要性が認知される時が来たか……」

これからは肉眼で異常を監視するのが鉄板になる

設定ミスではないと思う

そもそものテスト仕様の漏れ
テストの項目にメモリ障害があって切り替わるかどうかのテストをしていないだけ

メモリ障害を想定したテストってできるのかな

俺の株に影響なかったんでどうでもいい

正直に足引っ掛けてコンセント抜いちゃったって言っちゃいなよ

アローズみたいな呪われた名前にしてるからだろ

これって富士通が悪いのか？

原因を追求するの面倒だから設定間違えましたというオチだろ

大規模導入プロジェクトはユーザーと逐一意識あわせする
基本設計や詳細設計は全部ユーザーの承認を受ける
冗長設計も冗長試験手順も全部承認されてたら富士通だけの責任ではない
とはいえ日本文化的に富士通が謝るのが美しい幕引き

本当の原因はなんなんだろな

認知症の新しい呼び名かと思った
メモリー障害児

認知症は「児」じゃないだろ、と思って気付いた

下請技術者の低レベル化が激しくね？
言われなくても忖度してチェックとかするだろ

ソフトエラーとかで頻発してOFFにしてたとか？

具体的にどういう設定なのか知りたいな
それを見ないとなんとも言えない

もしかして民生のサーバ用マザボ・メモリ以下の信頼性なの？

わかってるのか！？3兆だぞ3兆！！お前のせいで損失したんだ。土下座のひとつもしたまえ！」 半沢「3兆を取り戻せばいいんですね。もし取り戻す事ができたら今回の件、土下座して詫びてもらいます！

うーん、ハード故障に関する記事ばっかりだなあ。
そんなものは午前中になんとかなってる。
後場向けにシステム再起動できなかった事情の方が大事なんだが。

冗長化って単語何
英語で