Notices by マストどんとふドンの管理人:fish: (mastododontofdon@www.mstddntfdn.online), page 15

corosync用のネットワークも停電の起きたSwitchと別Switchでハートビート専用に冗長化したのでSplitBrainも起こりにくくなったはず。今まではハートビートにも使っていたDMZのLANはルーターのスイッチ部だったので停電に弱いだけじゃなくルーターのメンテナンス再起動でもそこそこ止まってしまうのが良くなかった。
インターネット回線を冗長化するつもりはないので、ルーターの冗長化はしません。でもコールドスタンバイ用の仮想ルーターとルーター故障に備えた予備機は確保してます。Mikrotikのルーターはラトビアからの輸入だからどうやっても時間かかるしね。

メモリ増設完了したので、順次切り戻し中です。64GBあれば当面安心なので、メモリの心配しなくて良いのは幸せ。

実はLinux-HAは初挑戦です。
どどんとふ公式鯖はデータの即時同期＆保障をしないデータ同期の自前実装＆keepalivedなので。
MSFCも仕事では使ったことがなくて、本職で最も得意とするのはPowerHA。VMWare-HAはチョットダケデキル。

DBMS切り替えようとしたら前日の停電でスプリットブレイン起こってた！！あっぶなーい！
ハートビート用クロスケーブル繋ぐかな。

マストどどんとふドンを2.5.0に更新しました。新たに追加された連合リレー機能については、雪餅さんところの連合リレーサーバー側に登録依頼中です。

32GBのメモリをポチり。これで公式鯖稼働系は64GBになる。もっとほしいけどこれが最大。Threadripper欲しいです。

うさたーん氏の証言もありましたし、ログを見てもUpstreamエラーの件数が激減してたので502の発生頻度としては成功したっぽい。

今回のねこ卓とマストどどんとふドンのメンテナンスによってこうなりました。SPOFが減って可用性改善

逸汎の誤家庭にある松本メーターっぽい自宅鯖の監視画面
・Ez Server Monitor
・Zabbix
・jobscheduler
・仮想通貨マイニングのプールダッシュボード
他にも色々ありますが、常に全部見てるわけじゃない。
あと、PrometeusとかGrafinaは使っていないです。

自家発とかCVCFはさすがに無理だとしても、ネットワーク機器とNASだけでもUPS導入しようか悩む。

タイムアウト値の見直しと、OOMKillerが出てたので各仮想マシンのメモリを8GBに拡張してみました。(OOMKiller出ててびびった)
他にもGlusterfsのキャッシュとかを少し調整してみました。

うーん。502の原因は何だろう？？ロードバランサーの生死確認がシビアすぎるのかな？？

窓から見える範囲では畑のトマトは多分全滅。実は成りそうになかったら実害はなし。
枝豆は収穫したばかりなので問題なし。
サツマイモはまだ怖くて雨戸を空けられない。

というわけで、みなさんご一緒に「マストどどんとふドン！」(動作確認ついでの深夜の変なテンション)

あと、テストどどんとふドンも2.5.0に更新していますので、マストどどんとふドンの更新は近いうちに実施予定です。

多分、これでメンテナンス終わりです。コンテンツ置き場をGlusterFSにして、3重クラスター構成の仮想マシンに移動させました。
なんか不具合あっても、眠いので明日以降に対応します。

マストどどんとふドン！

まだもうちょっとメンテナンス続きます。

台風なので、明日は家で仕事。

ちょっと水っぽい気もするけど、十分すぎるほど美味しい。