プロジェクト・ノート 2015/12/21 ヤマハ株式会社 事業開発部 VOCALOID プロジェクト ©2015 VOCALOID Project, Yamaha Corporation VOCALOIDの概要 ©2015 VOCALOID Project, Yamaha Corporation VOCALOIDの概要 u VOCALOID/ボーカロイドとは？ ‒ ヤマハが開発した、歌詞と音符を入力することで高品質な歌声を合成するこ とができる技術およびソフトウェア 歌詞 ユーザー インタフェース 音符 (歌詞や音符等を編集する) 合成エンジン (歌声を作り出す) 歌声ライブラリ (声の断片を集めたもの) ©2015 VOCALOID Project, Yamaha Corporation VOCALOIDの概要 u 素片連結型 の合成方式 ‒ 歌手や声優の実際の歌声を収録し、そこから取り出した声の部品をなめらか に繋ぐことで任意の歌声を生成 歌声ライブラリ u 歌声ライブラリ ‒ ある音素から次の音素へ 声が移り 変わる部分 と 伸ばす部分 を用意 #a #d d-ar a-a ar-d a# d# a #m #k m-ar k-a ar-m a-k m# i ‒ すべての音素の組み合わせが必要 #p #s s-a p-ar ar-p a-s p# M • 日本語の場合 約500個∼ #t t-ar t-a ar-t a-t t# e • 英語の場合 約2,500個∼ “朝(a sa)” [#a, a-s, s-a, a, a#] ©2015 VOCALOID Project, Yamaha Corporation VOCALOIDの概要 u 略歴 2000年3月 2003年 2004年 2007年8月 発明者・剣持秀紀のチームで開発をスタート ドイツ・フランクフルト Musikmesse にて技術発表 Version 1リリース (日・英) VOCALOID2 リリース クリプトン・フューチャー・メディアさまより 「VOCALOID2 初音ミク」発売 2011年10月 VOCALOID3 リリース (日・英・西・中・韓) 音楽制作ソフトウェア Cubase (Win/Mac) への統合も 2014年12月 VOCALOID4 リリース 2015年4月 iOS 向け Mobile VOCALOID Editor リリース 2015年8月 Unity Technologies Japan さまとの合同プロジェクトを発表 2015年12月 VOCALOID SDK for Unity リリース ©2015 VOCALOID Project, Yamaha Corporation インタラクティブコンテンツへの 応用と期待 ©2015 VOCALOID Project, Yamaha Corporation インタラクティブコンテンツへの応用と期待 u 歌声合成とリアルタイム処理の原理的な課題 さ さ sa sa 音符の位置から発音開始 # s → NG s a a s a s a a a # a # 子音を先行し、母音に合わせる → OK # s s a a a s s a a u 合成エンジンの動作モード ‒ Playback モード • (500ミリ秒 + α) の先行時間を設け、準リアルタイム動作で合成品質を優先 ‒ Realtime モード • 子音の発音長を最小化し、明瞭度とのトレードオフでリアルタイム性を確保 u 歌唱フレーズや調声パラメータの動的操作 ‒ 歌詞・メロディ・歌唱技法等、歌声に様々な表現・表情を与えることが可能 ©2015 VOCALOID Project, Yamaha Corporation インタラクティブコンテンツへの応用と期待 音楽ゲーム 楽器アプリ バーチャルライブ 知育アプリ メディアアート コミュニケーション & UI ツール HCI・AI・VR 応用 ©2015 VOCALOID Project, Yamaha Corporation プラットフォーム展開 - 合成エンジンと開発環境 - 歌声ライブラリとアプリ開発 ©2015 VOCALOID Project, Yamaha Corporation 合成エンジンと開発環境 VOCALOID SDK for Unity ©2015 VOCALOID Project, Yamaha Corporation VOCALOID SDK for Unity u システム構成 ‒ 合成エンジンはプラットフォームごとのネイティブプラグインとして提供 • モバイル向けに軽量化したエンジンを各プラットフォームに展開 • C# のインタフェースを介して合成エンジンを利用する • Unity Editor から呼び出し可能 ‒ ビルドすると、関連データがプロジェ クトと実行ファイルに追加される u 対応プラットフォーム Unity 5.2.2 以降 VOCALOID SDK for Unity 歌声 ライブラリ 歌声 ライブラリ ターゲット VOCALOID 合成エンジン (Native) ‒ Windows 7 / 8 / 10 ‒ OS X 10.10 / 10.11 ‒ iOS 8.4 / 9.1 ‒ Android (先行評価中) VSQ(X) 歌唱 シーケンス データ インタフェース (C#) VSQX 読み込み命令 シーケンス編集命令 レンダリング命令 シーケンス情報 合成音 (リニアPCM) Unity 5 (Editor, Build Project) ©2015 VOCALOID Project, Yamaha Corporation VOCALOID SDK for Unity u 歌声合成処理の概念図 VOCALOID シーケンスデータ フレーズ 表情 アプリケーション 操作 テンポ シンガー VOCALOID 合成エンジン 合成音 フレーズ(歌詞・メロディ)を生成、もしくはファイルから読み込み、 シンガーの設定や表情/調声パラメータ、テンポ等を変更し、 リアルタイム/準リアルタイムで歌唱音声の合成音を得ることが可能 ©2015 VOCALOID Project, Yamaha Corporation VOCALOID SDK for Unity u 制御・操作可能な機能項目 ‒ 歌唱シーケンスデータの生成 • 歌詞, メロディ, 調声パラメータからシーケンスを生成 ‒ 歌唱シーケンスデータの読み込み • 各種 VOCALOID Editor が保存する VSQX/VSQ フォーマットをサポート ‒ 情報取得と編集 • 歌唱パート, トラック情報 • 歌詞情報 • ノート (音符) 情報 • 調声パラメータ • テンポ情報 • シンガー (歌声ライブラリ指定を含むパラメータセット) 情報 ‒ 歌声合成処理の実行 • Playback モード • Realtime モード ©2015 VOCALOID Project, Yamaha Corporation VOCALOID SDK for Unity u VOCALOID SDK for Unity ではサポートされない機能 ‒ 各種 VOCALOID Editor アプリケーションが持つオーディオ処理機能 • オーディオトラック情報の取得・編集 • オーディオミキサー情報の取得・編集 • オーディオエフェクトの適用と制御 → Unity 5 の標準オーディオフレームワークを利用 ‒ VOCALOID 歌唱シーケンスデータ (VSQ, VSQX) の保存 u 他言語対応の際に公開を予定している機能 ‒ ユーザー辞書 (歌詞→発音記号の追加辞書) に関する操作 ©2015 VOCALOID Project, Yamaha Corporation 歌声ライブラリとアプリ開発 ©2015 VOCALOID Project, Yamaha Corporation 歌声ライブラリとアプリ開発 u PROJECT : AKAZA ‒ Unity Technologies Japan さまとヤマハで、unity-chan! VOCALOID ライブラリの開発プロジェクトを立ち上げ • 世界観のプロットを元に歌声の方向性をディスカッションし、合同でスタジ オワークを実施 ‒ VOCALOID SDK for Unity のリファレンス歌声ライブラリに • 単なるサンプルボイスに留まることなく、深いコンテキストと「歌心」を 纏ったライブラリを目指して開発 ©2015 VOCALOID Project, Yamaha Corporation 歌声ライブラリとアプリ開発 u unity-chan! 歌声ライブラリ：ラインナップ・ライセンス・販売形態 ‒ Unity ランタイム向け (ターゲットプラットフォーム共通) • ユニティちゃんライセンスおよびガイドラインの下で無償配布 (SDK 同梱) ‒ VOCALOID SDK は unity-chan! との組み合わせにおいて無償利用が可能 ‒ iOS 音楽制作向け ※ 2016年1月下旬の販売開始を予定 • ヤマハ Mobile VOCALOID Editor のアプリ内ストアにてダウンロード販売 ‒ PC 音楽制作向け (Windows, OS X) ※ ダウンロード版は2016年1月中旬販売開始 • コミックマーケット C89 にてスペシャルパッケージを販売 • ヤマハ・ボカロネット VOCALOID SHOP にてダウンロード販売 ©2015 VOCALOID Project, Yamaha Corporation 歌声ライブラリとアプリ開発 u unity-chan! 歌声ライブラリを利用したアプリ開発のワークフロー VOCALOID SDK for Unity ランタイム版 (無償公開) 歌声 ライブラリ 合成 エンジン (ベースとなる 歌唱シーケンスを 事前に制作する場合) iOS 版 歌声 ライブラリ Mobile VOCALOID Editor VSQX unity-chan ! 歌声ライブラリ 歌唱シーケンス データ PC 版 歌声 ライブラリ VOCALOID4 Editor VOCALOID4 Editor for Cubase 楽曲 + 歌唱シーケンス制作 ©2015 VOCALOID Project, Yamaha Corporation 歌声 ライブラリ 合成 エンジン その他 素材 アプリケーション (アプリから動的に読み込む場合) サンプル・アプリケーション (いずれも SDK パッケージに同梱) ©2015 VOCALOID Project, Yamaha Corporation サンプル・アプリケーション u ユニティちゃんライブステージ！CRS ∼ VOCALOID Edition ‒ 合成エンジンの Playback モードを使用したサンプル・アプリケーション • Unity Technologies Japan さまよりユニティちゃんライセンスの下で配布 されている開発プロジェクトに VOCALOID エンジンをアドオン • オフボーカルのバックトラックを使用し、ユニティちゃんのボーカルパート をアプリ内で動的に生成 • 一本のメロディから SD ユニティちゃんのコーラスパートを生成・ミックス • スライダー UI による調声パラメータの操作を歌声に反映 ©2015 VOCALOID Project, Yamaha Corporation サンプル・アプリケーション u ユニティちゃんが歌う楽器アプリ ‒ 合成エンジンの Realtime モードを使用したサンプル・アプリケーション • 選択された歌詞を • 盤のクリックで一文字ずつ発声する 盤上のドラッグでグリッサンド奏法が可能 • 発声する歌詞の母音情報に合わせてキャラクターのリップシンクを行う u その他 ‒ API の呼び出し手続きを例示するチュートリアル・プロジェクトを同梱 ©2015 VOCALOID Project, Yamaha Corporation ビジネスの御案内 ©2015 VOCALOID Project, Yamaha Corporation ビジネスの御案内：御契約と使用料お支払いの流れ u 企画および御採用の御相談 ‒ ヤマハが窓口となり、企画内容およびアプリ開発の御相談を承ります ‒ パートナー各社さまの VOCALOID 歌声ライブラリ (およびキャラクター・ ビジュアル) を御採用いただく場合は、別途ライセンス契約が必要です ‒ 新規の歌声ライブラリの受託開発についても御相談ください u VOCALOID SDK のリリース ‒ 御契約成立後に、歌声ライブラリを組み込んだ SDK を御提供します クライアントさま 歌声ライブラリ(キャラクター) ライセンス 歌声ライブラリ の権利者さま 初期費用 保守費用 利用料のお支払い 歌声ライブラリ指定 (SDK リリース依頼) ヤマハ製ライブラリの場合は ヤマハとの御契約となります ©2015 VOCALOID Project, Yamaha Corporation VOCALOID SDK ライセンス リリース・技術サポート ヤマハ ビジネスの御案内：標準料金体系 下表を標準体系とし、企画内容への寄与率を考慮して価格を調整させていただきます 御採用いただく歌声ライブラリ 初期 費用 ユニティちゃんライセンス およびガイドラインにて 個別の許諾・契約が unity-chan! 不要とされるケース (ランタイム版) 保守 費用 合成エンジン 使用料 不要 (歌声ライブラリを含むSDKを無償公開) 同、個別の許諾・契約が 必要とされるケース VOCALOIDパートナー各社さまの 歌声ライブラリ 歌声ライブラリ 使用料 30万円 30万円 (6ヶ月) 売り上げが 月額100万円を 超えた場合に5% ヤマハ製 歌声ライブラリ 歌声ライブラリの 権利者さまと 御相談ください 売り上げが 月額100万円を 超えた場合に5% 初期費用：御採用いただいた歌声ライブラリを組み込んだ SDK を御提供するための費用です 保守費用：6ヶ月間のアップデートリリースと技術サポートを御提供するための費用です 使用料 ：歌声合成エンジンおよび歌声ライブラリ (ヤマハ製の場合) のロイヤリティです ※ キャラクタービジュアルの御利用については、別途権利者さまとのライセンス契約が必要です ©2015 VOCALOID Project, Yamaha Corporation ビジネスの御案内：お支払いのシミュレーション u 初期費用 ‒ 企画・プロジェクト・タイトル・イベントごとにお支払いいただきます u 保守費用 ‒ 6ヶ月ごとにお支払いいただきますが、アップデートリリースやテクニカル サポートが不要になった場合の継続は任意です u 歌声合成エンジンおよび歌声ライブラリ(ヤマハ製)のロイヤリティ ‒ 売り上げの月額に応じて算出し、3ヶ月ごとにお支払いいただきます プロジェクト継続期間 (原則として無期限) 御契約 初期費用 30万円 保守費用 30万円 ロイヤリティ 3ヶ月 6ヶ月 アップデートリリース & テクニカルサポート期間 算出 算出 算出 御請求 算出 算出 (6 n)ヶ月 30万円 30万円 継続の御判断 継続の御判断 算出 御請求 ©2015 VOCALOID Project, Yamaha Corporation 算出 算出 御請求 ビジネスの御案内：お問い合わせ先 u Unity with VOCALOID ヤマハ特設サイト ‒ 各種お問い合わせには、下記サイトのフォームを御利用ください • http://business.vocaloid.com/unitysdk/ u 報道関係の方のお問い合わせ先 ‒ ヤマハ株式会社 広報部・広報グループ 新川（あらかわ） TEL：03-5488-6601 u VOCALOID SHOP ‒ VOCALOID 関連ソフトウェアの公式ダウンロード販売ショップ • http://net.vocaloid.com/products u UNITY-CHAN! OFFICIAL WEBSITE ‒ Unity Technologies Japan さまのキャラクター公式サイト • http://unity-chan.com ©2015 VOCALOID Project, Yamaha Corporation
© Copyright 2024 ExpyDoc
