『ここをキャンプ地とする』いただきました
Notices by のえる (noellabo@fedibird.com), page 377
-
のえる (noellabo@fedibird.com)'s status on Saturday, 25-Dec-2021 13:59:18 JST
のえる
-
のえる (noellabo@fedibird.com)'s status on Saturday, 25-Dec-2021 13:18:06 JST
のえる
さて、私もFediMovie登録しようかな。新規です! やろう()
-
のえる (noellabo@fedibird.com)'s status on Saturday, 25-Dec-2021 13:16:03 JST
のえる
あ、ちなみにPeerTube、Cloudflareでキャッシュダメです。動画のストリーミングに使っちゃダメってのと、実際にちゃんと動かないというのがあります。
-
のえる (noellabo@fedibird.com)'s status on Saturday, 25-Dec-2021 12:39:43 JST
のえる
FediMovieでは、この設定部分を誤り、設定変更後に最初にアクセスした管理者の情報がそのままキャッシュされ、他のユーザーに同じ情報が表示され、利用可能となる、重大な不具合を発生させてしまいました。
原理的にはそのようなところですが、よく確認する……というのはあまり参考にならないので、それ以外の教訓として……
今回の件では、管理者アカウントで日常使用することの危険がありました。
私個人のアカウントがみえたぐらいであったらあまり深刻ではないのですが、なにしろ管理者としての権限が付与されています。
実際は、初期作成の管理者は別に存在したのですが、切り替える手間を面倒くさがって、自分のアカウントに管理権限を付与しました。まあこれがマズイことが、本件、よくわかります。
もうひとつは、配布元の手順通りではない設定に踏み込むからには、対象システムの特性をよく調べておく必要があるということです。
この点、たいへん見込みが甘かった。コードをみるまでもなく、ドキュメントでわかる内容で、まあわかるだろう、大丈夫だろう、という慢心であったといえます。
反省しきりです。#fedimovie
-
のえる (noellabo@fedibird.com)'s status on Saturday, 25-Dec-2021 12:39:29 JST
のえる
少し技術的なフォローをしておきます。
PeerTubeのようなログインベースのシステムは、同じURLに対するアクセスでも、ログイン状態やログインしているユーザーにより異なる内容を表示します。
他方、nginxやCloudflareのようなコンテンツをキャッシュするサーバは、基本的な動作としては、URLをキーにして、同じURLに対する2回目以降のリクエストを代理で応答する仕組みです。
そのままではユーザーごとに違う内容を返すシステムがうまく動かないので、キャッシュしてはいけない情報をアプリケーション(PeerTube)からつたえたり、キャッシュしてよい期限を短く指定するなど、キャッシュサーバが中継することを前提として、配慮した設計にします。
この点、MastodonやMisskeyはしっかり作られていて、単純にキャッシュサーバを介すようにしても問題は起きません。
PeerTubeはこのあたりはまだ調整中といったところで、基本的にはキャッシュは利用できず、一部、実験的な設定方法が案内されている段階です。(つづく)#fedimovie
-
のえる (noellabo@fedibird.com)'s status on Saturday, 25-Dec-2021 12:05:48 JST
のえる
#fedimovie インシデント第三報です。
諸々手を打ち、サービス再開しました。
本件、都合上、noellaboを削除しました。それ以外の変更点はありません。
大きな事故につながる不具合を発生させ、また対応が遅れまして、大変申し訳ありません。
ユーザーがログインする仕組みのWebサービス(サイト)では非常に危険かつ初歩的なミス(やってはいけないこと)であり、お恥ずかしい限りです。
なお、本トラブル発生中にアクセスされたみなさんは、事情を察し、自身はアクセスを打ち切り、それぞれ報告をあげてくださいました。
本件が最小の対応で解決できたのは、すべてみなさんの善意によるものです。
一般にこのようなことは想定できないところで、極めてレアな、幸運な状況でした。ありがとうございました。
-
のえる (noellabo@fedibird.com)'s status on Saturday, 25-Dec-2021 10:09:31 JST
のえる
#fedimovie インシデント第二報です。
本日5:19、FediMovieのnginxキャッシュ設定の変更により、PeerTubeのWebUIが過剰にキャッシュされ、ユーザーセッションが切り替わらず、アクセスすると管理アカウントを兼ねるnoellaboでログインした状態となりました。
管理者権限があるため、他の利用者の情報表示、変更等が可能な状態となりました。
同日8:02、サーバ本体のプロセスを停止。nginxプロセスも追って停止。
現在、この間の履歴について確認を行っています。
ほぼ問題ないことが確認できておりますが、精査の上で対応しますので、いましばらく停止状態継続とさせていただきます。
利用者の方にはご不便をおかけしますが、よろしくお願いします。
-
のえる (noellabo@fedibird.com)'s status on Saturday, 25-Dec-2021 08:19:13 JST
のえる
#fedimovie 早朝のメンテ後に、キャッシュ系のやらかしでユーザー全員管理者アカウントでログイン状態となる重大な不具合を発生させてしまったため、現在停止中です。
ご報告いただいたみなさま、ありがとうございます。
不具合の修正は既に完了していますが、影響範囲を確認後に状況に応じた対応、というカタチになりますので、少々お待ちください。
以上、ひとまず。
-
のえる (noellabo@fedibird.com)'s status on Saturday, 25-Dec-2021 02:30:30 JST
のえる
2時には寝ようの歌 混声四部合唱、毎日2時にあげるべきかなって思ってたけど、にするがやってくれているので不要だった\(^o^)/
-
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 19:09:43 JST
のえる
さて、帰宅したし、サーバメンテしよう
-
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 18:22:42 JST
のえる
ずっと配信流してるけど、スムースに見られてるね〜。 #fedimovieQT: https://sumanko.ml/@reticulmz/107500934994984860
-
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 18:10:16 JST
のえる
「管理人さん好きじゃああああ!!」
In conversation from fedibird.com permalink -
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 16:59:54 JST
のえる
#fedimovie ブースト負荷で応答が劇重になる不具合治ってないので、あとでnginxまわりに修正いれます。
サーバを移転し、処理能力を改善しました。これでトランスコード待ち時間がだいぶ短くなるかと思います。詳しくは後ほど。
In conversation from fedibird.com permalink -
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 16:54:46 JST
のえる
In conversation from fedibird.com permalink -
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 16:35:38 JST
のえる
ちょっとブーストの負荷試験
In conversation from fedibird.com permalink -
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 16:15:44 JST
のえる
#fedimovie 一通りなおったかな……。
In conversation from fedibird.com permalink -
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 14:46:31 JST
のえる
#fedimovie サーバ移設メンテを実施しましたが、一部エラーが発生しており現在調整中です。ご不便お掛けしますが、もう少々おまちくださいませ。
In conversation from fedibird.com permalink -
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 13:12:02 JST
のえる
@guskma 広告リンクをブロックするコンテンツフィルタが間にいて、クリックしてから、いつも悔しい思いをしています……(またやられた)
In conversation from fedibird.com permalink -
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 09:03:49 JST
のえる
@Satis どこかに抽選ツールがあるのかの?
In conversation from fedibird.com permalink -
のえる (noellabo@fedibird.com)'s status on Friday, 24-Dec-2021 07:50:50 JST
のえる
@kamisuke おはよう、王
In conversation from fedibird.com permalink