アーカイブ視聴数のメトリクスの可視化

[iaoiui]

What we want:

Dreamkastのアーカイブ視聴数メトリクスの可視化

How we do it:

Karteでメトリクス自体の取得はできているのでうまくその情報を今回のObservability環境に共有できれば実現可能か
取っているメトリクス自体にユーザーIDとか入っているので、そのあたりを自動で除去して共有する仕組みは必須

Anything else:

[MasayaAoyama]

このあたりにはエクスポートできます

[jacopen]

よさそう

S3にエクスポートして、それをLambdaで加工するのが一番コスト低くクラウドネイティブ感のある解決策な気がする

[iaoiui]

整理のためちょっとアーキ書いてみます

上記を少しフローとして整理してみましたが、短命のCompute(Lambda)からメトリクスを作るのでPushgatewayか何かを挟むようなイメージでしょうか

1. S3に継続的なエクスポートをKarte側ジョブで実施
2. S3のオブジェクト更新をトリガにして、Prometheusに投げやすくするためのデータ整形処理(Lambda)をキック
3. データ整形処理が終わったデータをPushgateway等を通してPrometheusにPush型で保存する

[iaoiui]

[jacopen]

ですかねー！
正直Lambdaで加工したあとはどうやってPrometheusに送るか真面目に考えて無かったんですが、Pushgatewayで実現出来るならそれがいいかなと思います

[b1gb4by]

実現可能性は高そう