新しいLive2Dアバターアプリ「mocape」を作ります｜clocknote.

こんにちは。グラフィックデザイナーなどのclocknote.です。この度、mocapeという新しいアプリケーションを作るプロジェクト（個人）をスタートしました。 作るアプリケーションは、フェイストラッキング（表情認識）を使用してLive2Dアバターを動かすものです。ぜひノーカット動作デモをご確認ください（60fpsで撮影しています）。 mocapeを使用するメリットLive2Dを使ったアバターを動かすアプリケーションは既にいくつかリリースされています。なのでmocapeを使う理由が必要になりますが、メリットとして下記が挙げられると思います。 ・クロスプラットフォーム対応（Windows / macOS） ・Webカメラを使用しない高精度なフェイストラッキング ・磨かれ続ける表情反映エンジン ・現場を考慮した機能設計クロスプラットフォーム対応（Windows / macOS） そもそもなぜ開

[naratas]

にじさんじも最近iPhoneXは情報取得だけに使用してLive2Dの動作はPCの別アプリでするようになったよ。

[moriken1098]

サブスクが成り立つって判ったらにじホロが既存アプリ引っさげて参戦して来るだけの気が。なお一番有名なアバターアプリ(PC版)FaceRigは例ののらきゃっとの悲しい事件の後に顔面開示防止機能が実装されましたとさ…。

[pptppc2]

カメラによる魂露出事故が回避できるのは嬉しい。配信者の個人情報保護的な意味は勿論だが、リスナー側も哀しい事故は見たくない。これはディズニーファンがミッキーの首が取れる瞬間を見たくないのと同様の願いだ。

[mottii-cocoa]

これ、地味にすごくないか。欲しい。

[quwachy]

にじさんじの配信アプリは機能が少なすぎると却下されたが果たしてデータを吸い上げるだけのツールがリリースできるのだろうか

[KoshianX]

へー、これは期待したいけどリリースは秋になりそうなのか。とりあえず触ってみたいものだけどなあ

[tzt]

審査通るかなあ

[Tatada]

事故防止機能や数値化からのジト目・ウィンクなどを判断→処理の機能がいいね。

[sjn]

Hitogataをproxyする方向で進めてたけど簡略化できるんならありがたいかな…とりあえずもの見てだけど

[htnmiki]

すげー

[zapperd]

こういうとこはiPhone優秀ねって思う

[ebo-c]

> 画像情報がPCに一切送られないので、顔面が表示されてしまうリスクなどがありません。/顔面が表示されてしまうリスク

[marukot-ch]

2020年の秋頃にできる？？？かも？？、らしい たのしみ

[Falky]

へー よさそう

[naosim]

webカメラを使わないのかー。なるほどなー。

[everybodyelse]

スゲー(ﾟДﾟ)

[heavenward]

これはすごい

[rgfx]

（この手のやつ、手の定形アクションを外部コントローラで発動できるといいんだけども

[nagikoH]

マシーナリー智子さんがオススメしてる記事

[Helfard]

事故が無いのは良いことだね。

[HolyGrail]

これはいいプロジェクトだ。2DRを配信で使おうと思ったときにかかるひと手間が改善されている。支援したい。

[mcddx30]

現状truedepthが最も汎用的かつ手軽に詳細な表情トラッキング出来る事を踏まえると、かなり細かな描写が出来そう。

[Galaxy42]

おれも美少女キャラになれるか！

[maiani]

にじさんじかどこかも似たようにiPhoneのカメラ使ってたような。PC側はiPhoneをキャプチャするだけだから電池残量がなくなった通知とかも配信に流れたりするけど。

[u_mid]

TrueDepthカメラはミニKinectだからなー

[yoshi-na]

iPhone X,iPad Pro (ARKit)& macOS で！！

[endo_5501]

“WebカメラをPCに繋ぐというのは、それだけでリスクを背負っていることになります。mocapeでは、iOS上でフェイストラッキング情報を数値に変えて、ネットワーク越しで表情の座標、パラメータのみをPCに送信します”