TOP カテ一覧 スレ一覧 100〜終まで 2ch元 削除依頼
【ムサコ】武蔵小杉駅の混雑JR東に対策求め署名スタート 改札、ホーム、車内すし詰め… 神奈川県川崎市
【皇室】「女系天皇」に賛成=79% 「女性天皇」に賛成=85% 天皇陛下を「素敵だと思う」=17% 世論調査★3 [スタス★]
【酒】福島の吟醸酒に最高賞 ロンドンの世界的品評会 IWC日本酒部門
【東京五輪】共産党都議団、東京2020大会の開催時期の再検討を求める申し入れ
【居酒屋】塚田農場で「地頭鶏」の不当表示 チキン南蛮など4つの料理に舶来のブロイラー使用 35万5000食販売 返金にも応じてまーす
【台風21号】関空、伊丹・神戸で計70便の代替運航を国に提案
【コロナウィルス】韓国で13人目の死者 70代の新興宗教信者=新型コロナ
【外食】ガッツリ系の「かつや」が女性向け「たらこスパ」専門店に挑むワケ 「東京たらこスパゲティ」
【海外】カンボジア総選挙、125ある議席の全てを与党が独占する見通し
【関空】伊丹空港、関空の国際線受け入れへ 1994年以来、24年ぶりの再開 国内線合わせ40便

【Pay】楽天ペイの障害、原因判明 QTnetデータセンターでUPS外して作業→停電→システム障害★2


1 :2019/11/27 〜 最終レス :2019/11/28
無停電機能を外したまま電源設備を更新、楽天などに影響した九電系データセンター障害の原因判明
2019/11/26 14:55
 九州電力の通信子会社QTnet(福岡市)のデータセンターで障害が発生した問題について、2019年11月26日に停電の原因が判明した。11月23日朝、電源設備の更新作業中に通常時の電源が遮断したことで予備電源に切り替わったが、電源の切り替え時に作動する無停電機能を外して作業していた。その結果、7秒間ほど電源が停止し、利用各社のシステム障害につながった。

まだ22社が復旧できていない
[画像タップで拡大表示]
 今回の障害で、事業継続を安定させる目的で使うはずのデータセンターに、想定外の盲点があると明らかになった格好だ。QTnetによると、影響を受けた約260の企業・自治体の中で、2019年11月26日10時時点で22社が復旧できていないという。
 今回の障害の影響で、クレジットカードの楽天カードやスマホQR決済の楽天ペイが11月23日朝に利用できなくなった。楽天ペイは11月25日朝に一時的に使えなくなったり、楽天カードは現在も一部機能が利用できなかったりと、発生から3日経過後も電源停止の影響が残っている。
https://tech.nikkeibp.co.jp/atcl/nxt/news/18/06551/
※前スレ
https://asahi.2ch.sc/test/read.cgi/newsplus/1574769800/

2 :
あるあるあるよねこれw

3 :
なんで外すの? データセンターの管理者は何してたの? ううん?

4 :
いいんです!

5 :
【経済】LINEの情報が韓国政府に筒抜けという報道。上場を前にLINEが大波乱 2014/06/22 【個人情報】

■LINEの個人情報はどに保管されているのか?

 無料通話チャット・アプリLINEの情報が韓国政府に筒抜けになっているという報道が波紋を呼んでいる。LINEの森川社長はすぐに
全面否定のコメントを出したが、騒動はすぐには収まりそうもない。LINEは上場を前に大きな課題を抱えてしまった格好だ。

 きっかけは、韓国の国家情報院(旧KCIA)が、LINEを傍受し、収拾したデータを欧州に保管、分析しているという月刊誌FACTAの記事。韓国政府のサイバーセキュリティ関係者が、日本の内閣情報セキュリティセンター(NISC)との協議の場で認めたという。

 傍受の方法はシステムに直接侵入するのではなく、通信回線とサーバーの間でワイヤタッピングするというもので、韓国の国内法では
違法にならないという。記事では、LINEの日本人ユーザーの通話データなどが韓国政府に送られているとしている。

 LINEの森川社長は、「LINEの通信は、国際基準を満たした最高レベルの暗号技術を使って通信されていますので、記事に書かれている
傍受は実行上不可能です」と反論し、「看過できない記事」であるとしてFACTAに強く抗議している。

 元CIA職員であるスノーデン氏の事件で明らかになったように、各国の情報機関が通信回線からデータを抜き取っていることはもはや常識である。

LINEは韓国企業ネイバーの子会社であり日本資本ではない。同社が韓国政府からの情報収集対象になっていないことの方がむしろ不自然なことである。
ネットでは、森川社長が「傍受は不可能」と言い切ってしまっていることから、逆にそれを不安視する声も上がっているようだ。

6 :
Suicaの方は?

7 :
【安全保障】ヤフーとLINE統合へ…裏で何が起きていたのか? 鍵は韓国大統領と孫会談にあった 2019/11/14 【個人情報売買】

■統合には両社の台所事情も影響

両社の統合に経済合理性があるというのは、米国や中国のメガプラットフォーマーと対抗するという側面があるとともに、両社の台所事情も影響している。

特にSBGについては、孫氏が創成した10兆円の「ビジョン・ファンド」が投資するシェアオフィス大手・米ウィー・カンパニー(We Workを運営)が
新規株式公開(IPO)を延期したのを境に市場ではビジョンファンドが投資する他のユニコーン企業群についても疑念が持たれはじめている。

直近の7〜9月期決算はビジョン・ファンドの巨額損失で「ぼろぼろ。真っ赤っかの大赤字」(孫社長)に転落した(最終損益は7001億円の赤字)。

 一方、LINEも主力の対話アプリの成長が頭打ちとなり、新たな収益源の確保に迫られている。金融事業を含む戦略事業の営業損益は赤字で金融事業のテコ入れは待ったなしである。両社が接近するのは自然の流れと言える。

流れを決定付けたのは孫氏の韓国政府への接近
そして、その流れを決定付けたのが孫氏の韓国政府への接近だった。
経産省関係者は、「孫正義氏は7月上旬にソウルで文在寅大統領と会って握手している。韓国から金を引っ張るつもりだ」と明かしていた。

その席で何が話されたのか。ビジョン・ファンドへの協力とともに、LINEの親会社である韓国ネイバーへの働きかけがあったのではないか。

8 :
公文書改竄・破棄を大問題と思わないヤツってホントに何なん?
こんなんが平気でまかり通るなら、いつ自分や家族、近しい友人が殺人犯に仕立て上げられるか分からんってことだぞ?
少しでも危険だと思うなら、次の選挙ではつべこべ言わずに自公維以外の野党に入れろ。ついでにマスコミがちゃんと扱わないから代わりにその危険性を周囲に触れ回って考えさせろよ
俺は警告したからな

9 :
やっぱ清掃のおばちゃんがやらかしてたか
しゃーないな

10 :
やっぱりそうか

11 :
UPSの意味ねえwwwwwwwwwwww

12 :
どうせそんなことだろうと思ってた。

13 :
これで障害発生とか脆弱すぎるだろ
他にまだ不具合を隠してるんだろ

14 :
嘘草

15 :
7秒ぐらいでがたがた言うな

16 :
UPSなんて停電しなければ無用だから

17 :
掃除のおばちゃんがコンセント抜いたんじゃなかったのか

18 :
作業員は日本人なのか?

19 :
なんで電源切り替える前にUPS外してんだよ

20 :
要はネコがコンセント踏んだんだろ

21 :
賠償請求されちゃう?

22 :
よりによって九電の子会社が犯すミスじゃないよねw

23 :
なんで今でも機能不全続いてるの?コンセント差したらすぐ直るだろ

24 :
10分たけ安全装置を外して作業していた時に「事故」が起こり停電してしまった
不幸な出来事や
運が悪かったんや

25 :
まあ消えても数万だから個人側からは大したことないけど

26 :
緊急停止は想定できても、即死の場合は何がどうなるかわからんから復旧手順すら作れない。
一時間くらい巻き戻すこと前提に手順つくるわけにもいかんし。

27 :
電力会社の子会社が
無停電電源知らないとか
バカですか?

28 :
リレーサーバの機能は無かったのが驚きだわ、
ここへもうだめね

29 :
電源設備の更新作業

全部取っ払って綺麗に入れ替えました最短で

30 :
そりゃあ電気工事側からすれば
絶縁したいんだから

そもそもサービスを停止すればいいだけの話

感電死してサービスも停止なら
炎上マーケどころかって話

31 :
想定外の盲点
って・・・

32 :
それはそれとして、未だに復帰できない22社は別の原因も抱えていそう。

33 :
え?お金扱うのに金融グレードのサーバーじゃなくて
そこらの下請けのデータセンター使ってたのかよ
こんなの法規制しろや

34 :
UPS切って電源切り替え作業とかw

35 :
ゆとりw
無停電源装置なんて設置するの時間の無駄じゃないですか?
だった7分止まっただけで壊れるなんて、このサーバーの製造責任じゃないですか?
何億の損害?僕アルバイトですけど!

36 :
ハッキングされたな

37 :
普通にUPSってそんな使い方するもんなの?

普通に電源切り替えで負荷側は稼働してますとか

怖いんだけど?

38 :
原因はデータセンターのミスとはいえ、金融機関の決済システムが業務継続できるようになってない設計なのはクソすぎるわ。今時災害対策は当たり前なのに。
金融庁は徹底的に指導してほしいわ。
PayPayもそうだが決済システムをなめすぎだろ

39 :
バカす…と言わざるを得ない

40 :
日本は監督してる奴がもう無意味だからな

41 :
作業員「10分くらいだからUPS外したままでも大丈夫だろう」

全停止

42 :
そもそもUPSはあくまで想定外の為のものじゃないのか?なんで電源を別系統で確保せず作業するんだ?もう頭の中全てがおかしい
こんなんがデフォルトな思考ならそりゃ日本のIT基幹システム終わってる訳だ

43 :
うーん・・・
商用電源をループ型とか多重受電で多重化し、その上に自家発安定稼働
までUPSかCVCFで保護し・・・ では無いのかなぁ。

電力系のDCって「1需要家1受電」原則を無視できる施設だから、
商用電源レベルで多重系統受電することも可能なわけで、電源安定化
の面から考えるとお勧めだと思ってたんだけどね。

44 :
>>42
upsの動作までは想定内、その間にサーバーを停止させる。

45 :
QTnetの作業は業者としてダメだろうけど
楽天カードはDRサイトもってないの??
姪浜データセンター周辺で災害が発生したらどうするつもりなんだろ
BCPとかどうなってんの??

46 :
さっさと原発再稼働しろ!

47 :
仮想通貨→業者「金融庁公認!出川!」→大暴落
電子決済→業者「政府公認、キャッシュレス還付!」
→システムトラブルで出金不能

こんなんばっか

48 :
>>45
だよな。
BCPの点でもだけど、「オバちゃんバケツ事故」でいきなり対応に追われた
人間は、1つのDCに業務を集約するのは凄くリスキーだって判ると思うんだけどね。

49 :
通電してできない電源工事だったのか?
サービス一時停止の事前連絡が必要だったのか?

50 :
DCの分散の問題?
サービスの停止スケジュールの問題?
工事の問題?

詳しい人、詳しく

51 :
>>42
違うぞ、普通電源切り替えや、全断したとき発電機動くまで、瞬断や発電機稼働までの数分間を補うために付いてる。
データセンターの電源は普通にUPS配下にあるのが当たり前。
まあこういうときの想定だと、万が一備えて、予備のUPS準備して交換するとこもあるが、数分間のために数百万掛けて予備UPS借りて備えるかいわれると、難しいところだね。
今回は多分、安全よりコストをとった結果起きた事故、経営判断ミスったんだろうと思う。

52 :
初歩的ワロタ

53 :
>>51
普通は大金扱うところは予備の予備あたりまで準備するもんだが

54 :
えぇ…

55 :
UPS外してたがために即死で、
停止手順踏めなかったから、データが壊れた的な感じ?

56 :
>>51
UPSつけてなかったて書いてあるがな
もともとついて動作してたものをわざわざ外すとも思えないし
なぜかups無しで稼働してたんじゃね
クレカの決済システムが無停電源装置すら繋がってないとか下請作業員にしてみたら想定外だろう

57 :
数日前にはメンテナンスでauペイ止めてたんだから楽天ペイでできないわけないのに

58 :
>>44 >>51
ありがとう勉強になったよ
誰もが知る会社のデータを取り扱う大きな会社でもこんなタマヒュンな事するんだなあ
最低限提案してる通りUPSに予備のUPS付けるくらいするのが絶対だと思ってたからショック

59 :
UPSなんて普通…物理的に手を付け無いでしょ…
なんでこんな手順にしたんだ…ってか事前に手順考えないのか…?

60 :
UPS外さなきゃいかん理由あるのか?

61 :
悪天候とか地震の時なら停電もそれなりの確率で
有るかも知れんが、ただ平常時に停電する事殆ど無いし
たまたまのups抜きのシステム更新作業中にそれが
起きるなんて偶然にしては可哀想だわ

62 :
UPS外すなよw
AからBに切り替えるときにUPSが入ってれば無停電でいけるじゃん
明らかに作業手順に問題アリ

63 :
>>55
もともと停止しちゃいけなかったんじゃね
クレカの決済だったらその数分の停止でも凄い損害だろうし
主電源から予備に切り替わるとき数秒電気流れないけど、データセンターだからUPS繋がってるから大丈夫なはず
とタカをくくったらUPSが繋がってないか電池切れてて死亡

64 :
>>61
たまたま停電になったのではなく、予備電源に切り替えて作業するところで
予備電源を外したままだったということだろう
不運ではなくただのポカミス

65 :
>電源設備の更新作業中
まさか…電源設備交換にUPSも含まれていて、一発でやろうとしたとかじゃないよね…?
分けてやると金かかるとかなんとかで、一度にやろうとしたとか…?

66 :
この作業に関わってた人間ってみんな胃に穴開くくらいストレス感じてんだろうなあ
転職したって付いて回るとんでもない無能の烙印は押されてるだろ

67 :
サーバーかストレージぶっ壊れてたら目も当てられないけど7秒間ならラックにUPS付けてれば大丈夫か

68 :
手順書だけ作って、脳内シミュレーションなんてのも、実務経験ほとんどないから出来ていない上流ベンダもしくは2次請けと
手順書を機械的にやれば契約的にOKな多重下請け、違法請負業者のコラボによる、よくあるミス

クラウドだかなんだか知らんが、そもそもネットワークも資格試験だけの知識で
サーバ構築なんて適当にしか出来なくて、挙句仮想化なんて知らんやつがクラウドとかインフラ語っている業者が増えたから
まぁ仕方ない
大手なら尚更

69 :
バックアップサーバーって普通無いものなの?

70 :
楽天のせいじゃなかったのかwwww

71 :
そろそろit電気工事士を資格化できるな

72 :
UPSの電源コードを経理の智子さんがけつまづいて抜いてしまったんだわ
 

73 :
なんか閲覧重かったのもDNSサーバー逝ってたのか

74 :
システム障害が発生しない現金払いが最強だとハッキリ分かっただろ

75 :
>>67
家のパソコンなんて停電何回もしてるけどなんともないのに、何でサーバーはすぐに死ぬんだろう
ミラーリングとかは安全そうに見えて逆にちょっとのデータ破損で再起不能になる印象

76 :
しかし何で朝っぱらにこんな重要な作業始めるかね。深夜にやりゃまだ影響も少ないし復旧の時間も取れただろうに。

77 :
普通はデータセンターだけではなくサーバ側にもUPSは付いてて
仮にデータセンターの電源が途切れても安全にシャットダウンできるようになってる
なのにまだ復旧できないのが22社あるということは、
普通のPCをサーバとして代用してるような企業がそれなりにあるということ
このデータセンターにしてこのユーザ企業ありってところだろうな
色々とレベルが低すぎる

78 :
>>77
>サーバ側にもUPSは付いてて
サーバに内蔵されているわけじゃないで、別途UPS購入しないと
あとエージェントソフトも設定しないとね、各サーバOSに
更にバッテリーも2・3年おきに交換やで
釣られちゃったのかな(´・ω・`)

79 :
この手の作業する人って詳しいわけじゃないからね
渡されたマニュアルにしたがって作業する人たち
問題はマニュアルがあっても安心できない人たちが作業するところ

80 :
いかにも無能だらけになった日本らしいなw
最近若手が育たないし、上はダメ世代だからな
クオリティ低い腐れ企業だらけ

81 :
国産ITじゃまず若手は育たないね
特に大手正社員新人だとスキル付ける前から派遣社員のリソース管理をやらされて
何をやるにしても「誰かに仕事を振る」ってことしか考えない人が出来上がる

82 :
普通こういう勘定系のシステム扱うデータセンターってバックアップ拠点作って
すぐにフェイルオーバーできるようにしてるもんなんじゃないの…?

83 :
>>78
スマホとかノーパソにサーバーOSインストールすれば
車のバッテリーに毛の生えたUPSと大げさなサーバーマシンなんていらないし、便利だと思うんだけどね
スペースあたりの性能だったらスマホ並べた方が性能良さそう、そういうサーバーないのかな

84 :
>>82
なんだかんだいってどこもコスト最優先なんだよね

85 :
ダブルパリティ組んでなかったのか?

86 :
>>83
分散処理って結構大変

87 :
やっすい外注に作業レビューの時間も与えないで丸投げしたんだろw
発注者は機器構成も切り替え運用手順も構築時の外注に丸投げだったから
今回の業者に当時の書類フォルダ
ドカッとなげてあとは知らんぷりw

88 :
ドシロウト作業?

89 :
ポイントサービスはあくまでおまけなんで
あまりほんきださんとこと思ってたらやだな

90 :
まぁもう使わないけどね

91 :
>>88
データセンタの作業者って基本素人

92 :
だから言ったじゃんやっぱ現金が

…え、そういう話じゃない?

93 :
修羅の国では予備電源も修羅!

94 :
海外色々回ったけど日本の技術者あっちの小学生レベルだ。
ビジネスといえば店子から搾取するだけの楽天とか土人国家かな。

95 :
今どき金融関連はAWSかAzureだろ。

96 :
日本人がキチガイなのは母親にRしてもらってるからだからな

97 :
九州電力子会社QTnet「原因は停電」

98 :
馬鹿が運用することも想定しないといけないのね

99 :
楽天の将来的な損失半端ない

100 :
そのままお亡くなりになってくれ


100〜のスレッドの続きを読む
【2歳児発見】カリスマボランティア尾畠さんは「根っからの善意の人」
【社会】「ブラック自治会の謎ルールにドン引き。毎日2回の『お地蔵さん』掃除を命令されて...」(大阪府
NHK生出演中ノーベル賞の吉野彰さん「馬鹿だチョンだと言われながら頑張った」→司会者「今馬鹿だチョンだと不適切な発言が…」★5
【新型肺炎】チャーター機利用者に8万円(税別)を請求 日本政府★7
【歴史】中臣鎌足の正体、百済の王子か 親百済派の中臣氏の系譜に潜り込み、中臣鎌足を名乗った★2
【おそロシア】路面電車に乗れなかった男が斧で電車の窓を破壊 モスクワ
【車で走っても税金】日本政府、自動車走行税を検討か 1000キロで5000円?1km5円の方向で検討か
【コロナ速報】米国の死者が急増 24時間で3000人以上の死者報告 24日 ★2
【新型肺炎】消費者庁「冷静に」 薬局にマスク求める客殺到
【岩手・大槌町】公用車(プジョー)でハイビームあおり運転?副町長「暴行受けた」と反論
--------------------
【新定番】日清 焼チキン【に、なるのか?】
   お ま ん こ 舐 め た い
【芸能】菅野美穂 ベビーを抱いて夕食のお買い物 仕事セーブで育児に専念中
ハムちゃん!ジャンガリアンハムスター【136匹目】
【藤巻忠俊】 黒子のバスケ 213点目
牧野正幸(まきの)175
【名無し奥も○○奥も】 気楽に井戸端会議 6930【みんな来い】
仮面ライダーゼロワン/01 Part51【これがわたしの】
プリパラの男女カップリングを語るスレ
【BlackDesert】黒い砂漠 Part42
【音楽】楽曲を最大5トラック(ヴォーカル/ドラム/ベース/ピアノ/その他)に分離できる無料のオーディオ分離ツール「Spleeter」公開
【中国メディア】日本の民泊新法、中国人は次々と物件を売り払い撤退の動き「元が取れない」
【世界】こんな判決じゃ死んでも死にきれない…。各国のZoom死刑宣告で驚いたこと 2020/05/25 [しゅわっち'92★]
【国民的スター】類い稀な才能を秘めた18歳 平手友梨奈がいまの思い語る「常に“これが最後になってもいい”という思いで挑んでいる」
3万円5千円以下の激安ロボット掃除機専用スレ 8
今コピーしてるものをペーストして去れ@きのこ
東京のいいところ
懐かし洋画 ’70年代 Part2
なぜ団塊世代はマナーやモラルに欠けるのか?
【Rank175↑】グランブルーファンタジースレ417
TOP カテ一覧 スレ一覧 100〜終まで 2ch元 削除依頼