読唇術を実現するためのデータベース作成!? 口の動きだけで言葉を認識し、違う声にする究極のバ美肉技術のための研究資金をクラウドファンディング中｜DTMステーション

ここ数年で、声を変換する技術が急速に進んでいます。いわゆるボイスチャンジャーの技術が進化していますし、DTMステーションでも何度も取り上げているクリムゾンテクノロジーのVoidol/リアチェンvoiceなども、画期的技術だと思います。ただ、従来の声の変換だと、どうしても元の声、イントネーションなどに引っ張られるため、なかなか思い通りの声にならないという問題点がありました。 そうした中、いまにわかに脚光を浴びる形になったのが、コンピュータによる読唇術（どくしんじゅつ：機械読唇ともいわれています）です。声を発せずに、口の動きだけで何を言っているかを認識した上で、それに音声合成を組み合わせれば、究極のボイスチャンジを実現できるのでは……、という発想なのですが、その技術研究のためのクラウドファンディングがスタートしたのです。これは先日「AIきりたんに次ぐ第2のAIシンガー、東北イタコの歌唱データベ

[itochan]

アメリカなら軍からお金が出そう

[misshiki]

“読唇技術の研究者は国内に数えるほどしかいませんが、たとえばディープラーニングの研究者や画像処理の研究者に参加してもらうことで、これまでは見出すことができなかった、新たな成果が得られるのではないか”

[habarhaba]

AIがめっちゃ得意そうなテーマで良いね

[NAT]

東北イタコ歌唱DB制作のクラファン、ストレッチゴールで挑戦する読唇術データベースとは何か、この研究を行っている齊藤剛史先生に話を聞いている。読唇Webアプリや口の動きのDB化など。

[kenfujimoto]

おじさんが女の子になりきるための究極の技術