大量のアクセスをドカドカ投げてきてサービス停止攻撃だろってレベルじゃなければ（それならそれでブロックしますが）、

ActivityPubのネットワークノードが増えたり減ったり、動いたり止まったり、いろんな応答コード返してきたり、未知のActivity投げてきたりしたって、いたって普通のことなので、コード改善したりしながら、淡々と対応すれば良いのです。

Mastodon、Pleroma、Misskeyなどが多いとはいえ、どんなActivityPub対応のサービスが接続するかわからないネットワークですし、みんな発展途上なので。