ちなみにこのJaegerでたくさん出てるのデフォルトでこんなに出る訳ではなくて、Datadog APM 用のトレーサの情報を横取りしてOpenTracing経由でJaegerに投げた結果です
やっぱ Datadog APM 金取るだけはあるな…みたいな感じだ(UIの問題にすぎない予感はするんだけどUIの問題…) https://md.ggtea.org/@Clworld/100577762772457342
@noellabo まさにそういうのでしたThx
@unarist 配信先毎のキューを用意した上でタスクキューには普通にタスクを載せて、載ってるタスクを処理する際に配信先ごとのキューを確認して全部まとめて処理する感じかなと思います(タスク実行待ちの間に溜まった分を一気に処理する)(タスクキューに対象の無い配信タスクが残るのでタスクキューに入れるかの判断が難しい)(妄想)
@unarist キューをそのままキューにしないでどのワーカーに振り分けるかのスケジューラーみたいなのを用意する というのはいい感じの手段な気がする
@unarist SidekiqプラグインはSidekiqのキューから取ってくる部分をごにょごにょしてるのが多いっぽい気がしますにゃ。
@unarist まあその上でキューを増やしすぎるとその箇所のオーバーヘッドがどんどん酷いことになって行くみたいなことがあってバランスが…。(結果むずい)
@unarist 最終的な優先度の実装についてはそうなると思うんですけど、そこに至る迄にまず例えば設定で書かれているdefaultキューの下に動的に生成する子キューを自動的に作成してうんぬんとかが行なわれる感じでそこでどこまで改善出来るかみたいなやつですね
じさばどん