のえる @noellabo@fedibird.com

#fedibird ちょっと不安定になってますが、ボチボチ戻ります。ご迷惑お掛けしております。

メニューに「トレンド」が出てれば、更新後の状態になってます。

#fedibird
階段でバドミントン、ハードですな……。それぞれ踊り場
に立てばいいのか。

#fedibird Nightlyちょっと再起動しまーす

Nightly Fedibirdは小さなサーバと同じ程度のシンプルな構成で（DB鯖だけわかれてる）、わりと予告なく再起動かけたりするんで突然ちょっと止まったりしますけど、Fedibirdより機能が先行実装されること、人数が少ないので実は軽いこと、Fedibird本体が遅延するような地震の直後みたいなときも平気で動いていることなど、割と快適サーバだったりします。

夜の名前に誘われたアカウントがちらほらいたりするのも楽しいです。発見してフォローしないと見えないですがw
#fedibird

#fedibird ちなみに、Fedibird関連のサービスのうち、

Fedibird
https://fedibird.com/

Nightly Fedibird
https://nightly.fedibird.com/about

Fedibird Matrix
https://matrix.fedibird.com

は同時に落ちないように、それぞれ別の構成になっています。

さくらインターネットとVultrが全面的に同時に落ちなければ、どれかは生き残るんじゃないかな……。

数分前に、再びロードバランサ経由に戻しました。たぶんなおったかと思います。少し様子をみてみます。 #fedibird

#fedibird 先程のダウンの件、VultrのVPSで運用しているHAProxyのロードバランサが、IPv4接続が通らなくなったことが原因のようです。現在、サービスに確認を求めています。

バックエンドのサーバ群には異常がないようですので、アプリケーションサーバに直接接続するようにして動作させています。普段2台で捌いている接続を1台にまわしているので、少し動作が遅くなっているかもしれません。

sidekiqプロセスは通常通りですので、大きな問題はないかと思います。

#fedibird なんかフロントサーバの調子がおかしいので、経路を変更して回避しました。

#fedibird ちょっとNightlyの方で、トレンドタグを表示する専用のカラムを実験しています。

#fedibird 地震後、1分程度の遅延（sidekiqの待機ジョブ3,600ぐらい）が少し続きましたが、今回は8分程度で解消しました。

普段待機しているサーバでワーカーを増やす対応をしましたが、その前に自然解消したような気がします。

ちなみに、このVPSのIPv6接続つながんないよ現象は、Vultrのサポートに報告して15分ぐらいで復旧しました。

コントロールパネルにフォームがあって、チケット切られて、初動や解決時の報告あがってくるの、とても良いです。 #fedibird

#fedibird みなさんがfedibird.comで最初にアクセスするサーバは、HAProxyを使ったリバースプロキシー／ロードバランサーで、ここではフロントと呼んだりしていますが、

独立したVPSをあてていて、ここからweb01とweb02にアクセスをできるだけ均等に振り分けて、負荷の軽減と、片方が動いていない場合にもう片方でカバーする働きをしています。

今回、このVPSのIPv6接続がおかしくなってしまったようで、web02への接続がうまくいっていませんでした。（VPSのIPv6なおらんので回避）

web01は同一VPS事業者のローカル接続経由なので問題なかったのですが、外部経由のweb02だけ影響を受けてました。

ひとまず、なんか遅い、API応答が変、ストリーミングが変、ってあたりが改善するかと思うので、様子をみてください。

#fedibird フロント再起動するので、ちょっと落ちます。長くて1分。

#fedibird なんか調子おかしいの、フロントのHAProxyとWebサーバの1台の接続がおかしいんだわこれ。

無事な方をとめたら、全部とまってしまった……。

#fedibird ちょっとメンテ中に想定していない現象がありまして、1分ぐらいつながらない状態になってしまったかと思います。ごめんね

#fedibird あるいは最新追従系のMastodonで、なんか調子がおかしい、遅い、WebUIや特定のクライアントで挙動がおかしいなどの情報があったら教えて下さい。

いまのところ、なんか重い、SubwayTooterで書き込めないことがある（と思ったら書けたり）、/api/v1/filtersの読み込みが終わらない（いつの間にか終わった）などの報告があがっています。

#fedibird にLTLないのはいろいろ理由があるわけですけど、ちょっと物足りないぐらいっていうのは意図したバランスであります。

うまく使ってやって下さい。

#fedibird メンテ一通り終わってます。6日ぶりの再起動かもしれないねー。

#fedibird 既に主要なとこ（フロントとDB）は終わったので、Webとワーカー系を順次まわしますー。

#fedibird サーバの再起動、一通りかけます。最長で停止2分ってとこ。よろしくー