1ms 以下のリアルタイムオブジェクト検出/画像処理を目指して Goの配信サーバサイドで通知ぼかしを実装してみたこと - Mirrativ Tech Blog

こんにちは ハタ です。 今回は以前iOSのクライアントサイドで実装していた通知ぼかし機能をサーバサイド(配信サーバ)上に再実装した事を書きたいなと思います 今回はかなり内容を絞りに絞ったのですが、長くなってしまいました、、 目次機能があったのでつけてみました、読み飛ばして読みやすくなった(?)かもしれません 目次 目次 通知ぼかし機能とは サーバサイド通知ぼかし プロトタイプの実装 苦労の始まり その1 画像処理速度 苦労の始まり その2 データ量 さらなる計算量の削減を求めて さらなる最適化へ Halide の世界へ 簡単な halide の紹介 苦労の始まり その3 いざ リリース リリースその後 We are hiring! 通知ぼかし機能とは 通知ぼかし機能は、ミラティブ上での配信中に写り込んでしまったiOSの通知ダイアログをダイアログの中身を見えないようにぼかし処理をしてあげる

[tattyu]

OS側でもうちょい配慮して欲しいなとは思うね。特定のアプリがフロントに来てたら通知を表示しない設定とかあってもいいと思うし、キャプチャさせるバッファに通知ダイアログは含めない、とかそういうの。

[gabill]

テクノロジーが利便性にクリティカルに貢献してる。

[eru01]

そこまで最適化すんならGoじゃなくIntel CCでゴリゴリやるべきやろと思ったらちゃんとCにしてて安心した。このレベルのループアンロールは今時のコンパイラはやるので意味ない。halide-lang知らんかったが便利そうやなこい

[auto_chan]

Showroom（Gaming）も実装してる機能なので張り合ってほしい

[stakme]

通知完全オフにすると、ゲーム中に届く「いいね！」「頑張れ！」みたいな視聴者のコメントも出せなくなっちゃうのですよね。だから一部の通知は配信にも表示したくて、そういう体験面の難しさもある

[cooking_kawasaki]

再生側も専用アプリなら、サーバー側は検出だけ実行してフラグ送信、表示時にマスクとかのほうが数フレーム前から適用も出来て軽そう。（と思ったらyoutube用も必要ぽいね、なるほど）

[Fushihara]

え、iosって通知完全オフの設定ないの？

[girled]

これは面白い発想だし技術的にもチャレンジングで興味深い。クライアントがテンパってるならサーバサイドでやればいいじゃない

[sonots]

技術でユーザデライトに直接貢献してて良い

[koogawa]

ユーザーが通知をオフにすれば良いというコメントがあるけど、毎回オフにするのは手間だし、設定忘れもあるからこういった実装をしているのでは？

[kamm]

『特定のアプリがフロントに来てたら通知を表示しない』2023年の今なら集中モードの設定でいけそう

[Shinwiki]

iosなんてapp storeでガチガチなんだからアプリに最前面描画させてやりゃあらかじめ半透明ブラー置いとくだけですみそうなもんだけども

[tasshi820]

Halideの採用事例だ。良いって聞くけどあんまりネットで情報見つからないんだよなー。

[bulldra]

すごい世界だ

[skypenguins]

callocの知名度やっぱ低いんやな…

[ys0000]

集中モード（ZEｎモード）とかで通知が切れれば一番いいんだろうけども。テクノロジーで解決するのは素敵。

[mtrock]

“ ”

[yarumato]

“通知ぼかしとは、配信中に写り込んだiOSの通知ダイアログの中身を見えないようにぼかし処理機能。クライアントで実装するとスマホ負荷大きく配信が異常終了するので機能削除。サーバ側で再実装。Goより早いhalideへ”

[chikoshoot]

？？？「ユーザに最高のエクスペリエンスを提供するため、 Notification Center のデザインを0から見直した。」

[chris4403]

すごい

[hurafula]

iOS15の集中モードをユーザーがちゃんとやれば解決する？

[surumedaka]

やりがいありそう

[nzxx]

そこまでやってんのかすごい

[reliphone]

iOS 15で機能強化されるフォーカスモードでは任意のアプリを開いた時に自動で通知が出ないようにできる（ホワイトリストで許可するアプリも指定できる）けど、サーバーサイドでやれば設定忘れも救われて良いね。

[daimatz]

がんばってる

[knjname]

C言語初心者だからよくわからんのだけど、memset 0 はcalloc じゃいかんのか

[hasiduki]

面白そう！

[a-know]

は〜〜なるほど

[kazuya030]

良い努力

[tourism55]

サーバサイド画像マスクは他にも応用ありそう。PCでのオンライン会議でも画面共有中は通知ポップアップ出ないようにOS制御されるけど、それもさらに別の端末にリモートしていてリモート先の通知が見える事故はあるし

[spark7]

まあDo Not DisturbをONにするかな。文字から先に出てくるのに自社アプリの通知を除く際はどういう表示になるんだろ

[castaneai]

cgoの知見！