音声・波形合成

現在でこそボーカロイドで誰もが当たり前に知る様になったコンピュータによる歌唱。AI時代の今は有名人の歌声に自分の歌声を変換するプログラムや、自分の声のまま、発した言葉を訂正してくれるとプログラムまで登場し始めています。 この音声合成による歌声を初めて採用した楽曲が１９６１年、コンピュータ音楽の生みの親とも言われるMax Mathewsのデイジー・ベルです。（別名Bycycle for Two：２人乗りの自転車とも呼ばれます） いかがですか？ デイジー・ベル (Daisy Bell) は、ポピュラーソングのスタンダードナンバーの1曲で、イギリスのシンガーソングライター、ハリー・ダクレ (Harry Dacre) が1892年に作詞作曲。ミュージックホール歌手のケイティー・ローレンス (Katie Lawrence) が歌ったことで有名となりました。 Max Matthewsによる世界で初めてのコンピュータ歌唱音楽はこのデイジー・ベルが採用されています。 Max Matthewsのデイジー・ベル詳細１９６１年、ベル研究所のコンピュータIBM7090（当時の価格で約２９０万ドル！）を使用し、Max Matthewsが音楽をプログラミング。コンピュータによる歌声部分以外の歌はジョン・ケリーさんとキャロル・ロックボームさんが歌っています。ちなみにお２人はプロの歌手などではなくベル研究所の職員さんの様です。 Max Matthews（canplayのMu-Tech講義資料より抜粋） アメリカ合衆国ネブラスカ州生まれの科学者、発明家、音楽家で、コンピュータミュージックのパイオニアの一人。 カリフォルニア工科大学およびマサチューセッツ工科大学にて学び、1954年に科学博士を取得の後、ベル研究所に勤め、音響生成に広く用いられた音楽プログラミング言語MUSIC-Nシリーズ(1957年-)を開発する。 その後、デジタルオーディオや音響合成の分野、楽器演奏に付随するマンマシンインタフェースの研究分野において、第一人者として活躍した。 1974年から1980年まではフランス国立音響音楽研究所(IRCAM)の科学アドヴァイザーを務め、1987年以降はスタンフォード大学にて教授を務めていた。 本講義でも取り上げるMAXの名前の由来となっている。 ２００１年宇宙の旅でHAL9000が歌うこのMa

クリムゾンテクノロジー社がリアルタイム音声変換ソフト、VoidolのMac版を本日より発売開始しました。通常価格は2,000円ですが、2019年7月まではキャンペーン価格の960円での販売との事です。 https://itunes.apple.com/jp/app/voidol/id1456342457?l=ja&mt=12 現在はMAC版のみとの事ですが、５〜６月にはWindows版の発売も予定されている様です。 ボーカロイドのボイスの様にキャラ付きのボイスバンク形式になっており標準ではくりむ蔵と音宮いろはという２種類のボイスが付属。 やはりボーカロイドと同様追加のボイスも発売されていく様ですね。 高度な変換や音楽用途で使用、、、はできないかもしれませんがvtuberなどにお気軽に使用するには非常に魅力的なソフトとなっています。 以前canplayの講義やAI自動作曲研究LABでもお伝えしましたが 音声合成手軽に　国情研、学習データ１時間のＡＩ開発https://canplay-music.com/2019/01/08/voice-synthesize/ Deep Learningを使用して自分の声を有名人の声に変換https://canplay-music.com/2019/01/01/voice-change/ この分野は熱いですね！ 我々も今後も研究し続けます！

MITの研究チームが動画から特定の楽器音を抽出するプログラムThe Sound Of Pixelsを作成しました。 まずは動画をご覧ください。 いかがですか。 複数楽器が演奏されている動画の中の、特定の楽器をクリックするとその楽器の音だけが抽出されるという事です。面白いですね。 動画にもありますが、複数混在している楽器音が、動画内空間のどの方向から発音されているのかを認識し、抽出できるらしいです。すごいですね！ 今はまだデュエット（２つの楽器音）までしか試みされていない様ですが、今後は多数の楽器演奏の中から特定の楽器の発音の場所を特定し、抽出する事もできるかもしれません。３次元的に波形がビジュアル化されるとそれだけで面白い映像作品になりそうです。 音を視覚的に認知できる、新しい表現方法良いですね。 波形領域でのAI音楽の活用、さらに今後も注目です！