AIきりたんの仕掛け人、森勢将雅准教授に聞く、AI歌声合成の世界で今起こっていること｜藤本健の “DTMステーション”

すでにご存じの方も多いと思いますが、2月22日にAIきりたんなるものが登場し、大騒ぎとなりました。正確にはSHACHI(@SHACHI_KRTN)さんという方が開発したNEUTRINOというAI歌声合成ソフトがフリーウェアで公開されるとともに、それで歌わせた楽曲が、くろ州さんなどによって公開され、話題になったのです。2月22日は、ちょうどMIDI 2.0の日米合意があった日で、そのドタバタでネットをチェックできておらず、私が気づいたのは24日になってから。その歌声を聴いて驚愕しました。 実際どんなものなのかと、さっそくNEUTRINOをダウンロードし、手元にあったMusicXMLデータを元に歌わせてみると、従来のVOCALOIDなどとは別次元の人間的な歌声で、東北きりたんが歌ってくれてさらに驚いたのです。どういうことなのか知りたいと思い、開発者のSHACHIさんに連絡してみたところ「種々の

[kenfujimoto]

2月22日に公開されたNEUTRINOどうして、こんなすごいツールが、しかもフリーで登場したのか。その仕掛け人、明治大学の准教授、森勢将雅先生にインタビューしてみました。

[otchy210]

世の中に 50 曲以上の楽曲を発表している歌手は山ほどいる、任意の曲から音声部分のみを取り出す事も出来る、このシステムはオープンソースで開発されている、後は分かるな？

[ks1234_1234]

「東北きりたんの声で50曲、歌ってもらいました」　えっ　たったそんだけのソースであれができるの?　世界線が意外過ぎて怖い。研究者さん凄い。

[yoiIT]

森勢先生の写真から醸し出されるキャラの濃さ

[pptppc2]

ボカロボイロはまだまだ進化の余地がありそうだ。あとこの技術がもっと進化してそれがボイチェンに流用できればいよいよもってバ美肉で見た目も声も美少女になれる時が来そう。

[kokumaijp]

ちょっとわろた “実は森勢先生がSHACHIさんであり、NEUTRINOの開発者だった、ということなんですか？ 森勢：いいえ、NEUTRINOを開発したのはSHACHIさんであって、私ではありませんし、SHACHIさんがどんな人なのかも知らない”

[okemarux]

歌い方のクセがあるってことは人格があるみたいなことやし、調整次第でなんでも歌えるボーカロイドとは別の線でいってほしいな。教師データ次第で得意なジャンルとかも変わりそう

[nyoron0128]

これを使って作られた曲がどれもこれも「真中らぁらが歌う〇〇」みたいな題名・評価を受けていてちょっとモヤっとする。茜屋もらぁらも好きだけどここまで引っ張ってこなくてもいいのでは・・・って感じで。

[mapk0y]

“JUCE Framework” って初めて知った

[yarumato]

“仕掛け人、明治大学准教授。著作権法30条の4改正にともない東北ずん子公式アカウント協力のもと声優が収録に対応。50曲歌ってもらいWAV,MIDI,音素ラベル付きテキスト3点セットで2018年に歌唱データベースを公開”

[raitu]

"ちょうど著作権法30条の4が改正されたというのも大きなポイントでした。これによりAIによるディープラーニングや楽器開発のために試験的に楽曲を演奏したり歌ったりすることに対する規約が緩和"

[ruicc]

あれ50曲で出来るもんなの

[onesplat]

成人式のヤンキーみたいないでたちしてんな

[taguch1]

良い准教授シリーズ

[misshiki]

“何がどうして、こんなすごいものがフリーウェアとして登場したのか、さっぱり状況がつかめません。そこで、森勢先生に話を伺ってみました。”

[c_shiika]

AI美空ひばり、若手に猛追激されるの巻

[asiamoth]

ボイスロイド実況を毎日観ている一人として嬉しい躍進。¶できれば木野日菜さん（『あそびあそばせ』華子）の歌もAIに──は無理だろうなー。

[ornith]

夢が広がりんぐな話だ……！

[knok]

おお、WORLDの開発者。どうも名前の由来がDIOのスタンドと思われるんだよなあ。WORLDのコンポーネント名ほかにもD4Cとかあるし

[dalmacija]

アカペラ音源がいるんだよね

[hiddy216]

すごい

[stealthinu]

NEUTRINOはオープンソースの歌声データベースと音声合成システムWORLDが元になっているが作った人は別の人らしい。森勢先生は先越されてちょっと悔しかっただろうか？

[norick]

丁度作ってた曲のボーカルをボカロからきりたんに入れ替えたら今までの苦労が虚しくなった。ただ、文中にあるようにデメリットもあるので期待も大きい。

[sds-page]

学習済みパラメータのデータを有料で売ればマネタイズも可能

[wintersmoon0418]

聴いてびびった。言われないとAIってわかんないだろうな。自分含め、ボカロの機械的な歌声は苦手だったんだけど、これならって人も多そう。こうなると将棋AIで起こった人間である意義論争が今度は音楽にも起こるのか

[JohnP]

ブコメの三番目にある、任意の曲からボーカル部分を抜き出すってのは、この技術に食わせるソースとしては不足だと思うよ。

[axkotomum]

東北きりたん実況ももっと流行れ！

[mcgomez]

すごい。

[alphaorange69]

さきがけ研究者か。最終成果楽しみにしたい。

[mventura]

インタビュアーの知識の深さ。パラメーター調整の余地が大きければボーカロイドにある楽しみも引き継げるかも。

[tacky2k]

AI音声の世界の今って感じで面白いインタビュー。UTAUもいじる余地があるのね。 面白いね。

[Windfola]

偏見で物言うけど、CGM方面は結局主戦場たる動画サイトで「自然な歌声」が武器になるのか（歌い手の踏み台で終わらないか）、ボカロやUTAU音源のファンみたいな固定客が着くか、が焦点になりそう。

[okamurauchino]

“徹底”

[Listlessness]

使ってみての多田さんの感想とかも聞きたいねん

[ibisyouta]

すごいやん！

[natu3kan]

優秀な教師が居れば、出力できる体があればそれを模倣できる未来ってロマンある。

[makou]

ここから何が始まるのかが楽しみだ。