【障害報告】2017.9.11発生:OmniPathネットワーク障害

2017.9.15

次の通りネットワークに障害が発生し復旧しました。

9/11 17:44に Omin-Path ネットワークに障害が発生しており、約200ノードの計算ノードとストレージ(Lustre,NFS)間において正常にアクセスできない現象が発生しました。login0,1においては正常にアクセスできていました。

2017年9月12日(火) 9:30にOmni-Pathネットワークのファブリックマネージャを再起動し10:40頃に復旧しました。

影響のあった可能性のあるジョブは以下の通りです。

55684,?55684, 55684, 55684, 55684, 55684, 56443, 56521, 57026, 57076, 57077, 57078, 57079, 57080, 57081, 57082, 57083, 57084, 57085, 57228, 57244, 57265, 57266, 57267, 57361, 57362, 57375, 57394, 57405, 57426, 57441, 57448, 57453, 57456, 57458, 57460, 57462, 57465, 57467, 57468, 57479, 57498, 57503, 57509, 57516, 57533, 57534, 57538, 57545, 57554, 57578, 57585, 57594, 57596, 57598, 57602, 57603, 57639, 57699, 57700, 57701, 57702, 57703, 57705, 57735, 57735, 57735, 57735, 57735, 57735, 57873, 57879, 57881, 57888, 57889, 57916, 57921, 57925, 57927, 57939, 57947, 57959, 57960, 57961, 57962, 57963, 57964, 57965, 57966, 57967, 57968, 57969, 57970, 57971, 57972, 57973, 57974, 57975, 57976, 57977, 57978, 57979, 57980, 57981, 57982, 57983, 57985, 57986, 57987, 57988, 57989, 57990, 57991, 57992, 57993, 57994, 57995, 57996, 57997, 57998, 57999, 58000, 58001, 58002, 58003, 58004, 58005, 58006, 58007, 58008, 58009, 58010, 58012, 58013, 58014, 58015, 58016, 58017, 58018, 58019, 58020, 58021, 58022, 58023, 58024, 58025, 58026, 58027, 58028, 58029, 58030, 58031, 58032, 58033, 58034, 58035, 58045, 58048, 58054, 58055, 58058, 58061, 58063, 58064, 58066, 58067, 58068, 58070, 58074, 58076, 58077, 57262, 57263, 57353, 57560, 57576, 57635, 57662, 57698, 57706, 57708