ソフトウエア製品の開発戦略

Size: px

Start display at page:

Download "ソフトウエア製品の開発戦略"

ゆきひらにばし
5 years ago
Views:

1 ソフトウエア製品の開発戦略 ~ 音楽製品の事例に於いて ~ 2011 年 12 月 10 日弁理士綾木健一郎

2 始めに本研究内容は公知文献に基いて調査した結果ですヤマハ株式会社クリプトンフューチャーメディア株式会社インターネット株式会社 AHS 社その他各社に対する内部インタビューに基く内容は含まれていません当該スライドで紹介している製品には各社の登録商標が含まれています

3 発表の狙いコンピュータで歌声を合成するソフトウエア VOCALOID が成功した要因について調査してみましたこの成功要因は他のソフトウェア製品の技術開発 / 知財戦略にも応用できると思われます

4 VOCALOID 製品の概略 VOCALOIDの技術紹介 VOCALOIDの技術開発経緯 VOCALOIDコミュニティの形成まとめ

5 VOCALOID 製品の概略 VOCALOID( 登録商標 ) とはヤマハが開発した音声合成技術およびその応用製品の総称をいう VOCAL ( ボーカル ) に ~のようなものを意味する接尾詞 ~OID を組み合わせた造語でもある右に示すようなエディタに音階を入力して歌唱音声を自動生成するソフトウェア製品である

英語 : 男声 ) 2004 年 3 月発売音声担当はプロ歌手 ( 詳細不明 ) LOLA( 英語 : 女声 ) 2004

6 VOCALOID 製品の概略 ~ZERO-G~ 英国 ZERO-G 社の製品音楽のプロ用を想定しパッケージも重厚なものになっている MIRAM は音声担当のミリアムストックリーの写真が用いられている LEON( 英語 : 男声 ) 2004 年 3 月発売音声担当はプロ歌手 ( 詳細不明 ) LOLA( 英語 : 女声 ) 2004 年 3 月発売音声担当 : 歌手 ( 詳細不明 ) MIRAM( 英語 : 女声 ) 2004 年 7 月発売音声担当 : ミリアムストックリー

MEIKO( 日本語 : 女声 ) 2004 年 11 月発売音声担当 : 拝郷メイコ ( 歌手 ) 売上本数 :

7 VOCALOID 製品の概略 ~ クリプトンフューチャーメディア ~ ZERO-G 社と同様にプロ歌手の音声を用いているパッケージはいずれもイメージイラストであり音声担当歌手の写真ではない MEIKO( 日本語 : 女声 ) 2004 年 11 月発売音声担当 : 拝郷メイコ ( 歌手 ) 売上本数 : 推定 4200 本 KAITO( 日本語 : 男声 ) 2006 年 2 月発売音声担当 : 風雅なおと ( 歌手 ) 売上本数 : 推定 6000 本

VOCALOID 製品の概略 ~ クリプトンフューチャーメディア ~ クリプトンフューチャーメディア社のキャラクターボーカルシリーズ第一弾音声担当に新人声優を起用ポップでキュートなバーチャルアイドル歌手というキャラクター設定新エンジンの搭載による音質向上と相まって大ヒット商品となった初音ミク ( 日本語

8 VOCALOID 製品の概略 ~ クリプトンフューチャーメディア ~ クリプトンフューチャーメディア社のキャラクターボーカルシリーズ第一弾音声担当に新人声優を起用ポップでキュートなバーチャルアイドル歌手というキャラクター設定新エンジンの搭載による音質向上と相まって大ヒット商品となった初音ミク ( 日本語 : 女声 ) 2007 年 8 月発売音声担当 : 藤田咲 ( 声優 ) イメージイラスト :KEI 売上本数 : 推定 56,000 本キャラクター設定 : 年齢 :16 歳身長 :158cm 得意なテンポ :70~150BPM 体重 :42kg 得意な音域 :A3~B5 得意な曲 : アイドルポップスダンス系ポップス

9 VOCALOID 製品の概略 ~ クリプトンフューチャーメディア ~ 初音ミク音声デモバラード童謡 JPOP

VOCALOID 製品の概略 ~ クリプトンフューチャーメディア ~ キャラクターボーカルシリーズ第 2 弾初音ミク同様に声優を起用同一の声優が男声と女声を担当している鏡音リンレン ( 日本語 : 女声 / 男声 ) 2007 年 12 月発売音声担当 : 下田麻美 ( 声優 ) イメージイラスト :KEI 売上本数 : 推定 25,000 本鏡音リン ( ) 年齢

10 VOCALOID 製品の概略 ~ クリプトンフューチャーメディア ~ キャラクターボーカルシリーズ第 2 弾初音ミク同様に声優を起用同一の声優が男声と女声を担当している鏡音リンレン ( 日本語 : 女声 / 男声 ) 2007 年 12 月発売音声担当 : 下田麻美 ( 声優 ) イメージイラスト :KEI 売上本数 : 推定 25,000 本鏡音リン ( ) 年齢 :14 歳身長 :152cm 得意なテンポ :85~175BPM 体重 :43kg 得意な音域 :F#3~C#5 得意な曲 : エレクトロ & ロック系ポップス歌謡曲 ~ 演歌系ポップス鏡音レン ( ) 年齢 :14 歳身長 :156cm 得意なテンポ :75~160BPM 体重 :47kg 得意な音域 :D3~C#5 得意な曲 : エレクトロ & ロック系ポップス歌謡曲 ~ 演歌系ポップス

11 VOCALOID 製品の概略 ~ クリプトンフューチャーメディア ~ クリプトンフューチャーメディア社のキャラクターボーカルシリーズ第 3 弾英語と日本語とを混在して歌わせることが可能巡音ルカ ( 日本語 / 英語 : 女声 ) 2009 年 1 月発売音声担当 : 浅川悠 ( 声優 ) イメージイラスト :KEI 売上本数 : 推定 13,000 本キャラクター設定 : 年齢 :20 歳身長 :162cm 得意なテンポ :65~145BPM 体重 :45kg 得意な音域 :D3~D5 得意な曲 : ラテンジャズ ~ エスノ系ポップス / ハウス ~ エレクトロニカ系ダンス

月発売音声担当 : ソプラノオペラ歌手 Sonika( 英語 : 女声 ) 2009 年 7 月発売音声担当

12 VOCALOID 製品の概略 ~ZERO-G~ ZERO-G 社製品 (VOCALOID2 エンジン使用 ) プロユースを意識し音源にはオペラ歌手を主に用いている Prima( 英語 : 女声 ) 2008 年 1 月発売音声担当 : ソプラノオペラ歌手 Sonika( 英語 : 女声 ) 2009 年 7 月発売音声担当 : 不明 ( 歌手や声優ではない ) Tonio( 英語 : 男声 ) 2010 年 7 月発売音声担当 : オペラ歌手

13 VOCALOID 製品の概略 ~PowerFX~ Sweet ANN( 英語 : 女声 ) 2007 年 6 月発売音声担当 : ジョディ ( 歌手 ) Big-AL( 英語 : 男声 ) 2009 年 12 月発売音声担当 : フランクサンダーソン ( 声優 )

14 VOCALOID 製品の概略 ~ インターネット ~ 歌手の声で歌わせるようにしたアーティストボーカルシリーズを展開がくっぽいど ( 日本語 : 男声 ) 2008 年 7 月発売音声担当 :GACKT( 歌手 ) イラスト : 三浦健太郎 megpoid( 日本語 : 女声 ) 2009 年 6 月発売音声担当 : 中島愛 ( 歌手 / 声優 ) イラスト : ゆうきまさみ

15 VOCALOID 製品の概略 ~ インターネット ~ Lily( 日本語 : 女声 ) 2010 年 8 月発売音声担当 :m o v e のボーカル yuri イメージイラスト :KEI ガチャッポイド ( 日本語 : 男声 ) 2009 年 12 月発売音声担当 : 雨宮玖二子? ( ポンキッキシリーズのガチャピン役 ) エイペックス :m o v e のアニメソングカバーアルバムとの同時発売

16 VOCALOID 製品の概略 ~ インターネット ~ VOCALOID3 エンジン使用のアーチストボーカルシリーズ CUL カル ( 日本語 : 女声 ) 2011 年 12 月 22 日発売予定音声担当 : 喜多村英梨 ( 声優歌手 )

17 VOCALOID 製品の概略 ~AHS~ 氷山キヨテル ( 日本語 : 男声 ) 2009 年 12 月発売音声担当 : 比山貴咏史 ( 歌手 ) イラスト : 梅谷阿太郎歌愛ユキ ( 日本語 : 女声 ) 2009 年 12 月発売音声担当 : 女子小学生 ( 非公開 ) イラスト : 梅谷阿太郎

18 VOCALOID 製品の概略 ~AHS~ SF-A2 開発コード miki( 日本語 : 女声 ) アーティストエディション年 12 月発売音声担当 : フルカワミキ ( 歌手 ) イラスト : コザキユースケ猫村いろは ( 日本語 : 女声 ) 2010 年 10 月発売音声担当 :( 非公開 ) イラスト :okama サンリオウェーブの企画ハローキティといっしょ! のキャラクター

19 VOCALOID 製品の概略 ~AHS~ 結月ゆかり ( 日本語 : 女声 ) 2011 年 12 月 22 日発売予定音声担当 : 不明イラスト : 文倉十入力読み上げソフト VOICEROID 結月ゆかりと同時発売

20 VOCALOID 製品の概略 ~ キューンレコード ~ 歌手音ピコ ( 日本語 : 男声 ) 2011 年 9 月発売音声担当 : ピコ ( 歌手 ) イラスト : ユキタ音声担当歌手ピコのセカンドシングル勿忘草との同時発売

21 VOCALOID 製品の概略 ~SBS Artech( レコード会社 )~ SeeU( 韓国語 : 女声 ) 2011 年 10 月発売音声担当 : キムダヒー ( 歌手 ) イラスト :KKUEM 音声担当は 2011 年 11 月にデビュー予定の K-POP アイドル Glam のメンバー

22 VOCALOID 製品の概略 ~1st PLACE( 音楽事務所 )~ IA -ARIA ON THE PLANETES( 日本語 : 女声 ) 2012 年 1 月 22 日発売予定音声担当 :Lia( 歌手 ) イラスト : 赤坂アカ事務所所属の歌手を音声担当としいた製品

23 VOCALOID 製品の概略 ~ ビープラッツ (YAMAHA)~ VY1( 日本語 : 女声 ) 2010 年 9 月発売音声担当 : 不明 ( 声優 ) 音声ライブラリコードネーム :MIZUKI VY1( 日本語 : 男声 ) 2011 年 4 月発売音声担当 : 不明 ( 声優 ) 音声ライブラリコードネーム : 勇馬 YUMA

24 VOCALOID 製品の概略 ~ ビープラッツ (YAMAHA)~ Mew( 日本語 : 女声 ) 2011 年 9 月発売音声担当 : 坂本美雨 ( 歌手 ) 兎眠りおん ( 日本語 : 女声 ) 2011 年 12 月 16 日発売予定音声担当 : 不明イラスト : 渡辺明夫ディアステージの企画による製品企画コンセプトボーカロイドル ( ボーカロイドアイドル )

25 VOCALOID 製品の概略 VOCALOIDの技術紹介 VOCALOIDの技術開発経緯 VOCALOIDコミュニティの形成 VOCALOIDの将来像 ( 推定 ) まとめ

26 VOCALOID の技術紹介 ~VOCALOID のねらい ( 開発テーマ )~ VOCALOID のねらい (= 開発テーマ ) としてヤマハが設定したのが使える歌声合成システムでありこのテーマを細分化したのが以下 4 項目である歌詞が聞き取れることスムーススムースであること素片接続時のノイズや音色の突然の変化がないこと ) 自然自然であることブザー音的な合成音からの脱却人間らしい表情付け使いやすい楽曲製作環境財団法人デジタルコンテンツ協会デジタルコンテンツの知的財産権に関する調査研究,2008 より引用

27 VOCALOID の技術紹介 ~VOCALOID のねらい ( 開発テーマ )~ 音声合成は連結的合成とフォルマント合成の 2 つに大別されるヤマハは自然な合成音を目的に連結的合成を選択したと思われる 1 連結的合成 VOCALOID 録音された音声の断片を連結して合成する方法のこと長所 : 自然な合成音を出力することができる短所 : 音声断片のデータベースを要する 2 フォルマントフォルマント合成 Yamaha-PLG100SG(1997) 録音された音声は使用せず基底周波数音色などの各種パラメータを調整して人工的な音声波形を生成する方法のこと長所 : 合成音はロボット的になる短所 : 音声断片のデータベースが不要

28 VOCALOID の技術紹介 ~VOCALOID のねらい ( 開発テーマ )~ PLG-100SG( プラグインボード ) 1997 年発売 MU-2000 等の音源モジュールに組み込んで使用当該ボードにはフォルマント音声合成技術が搭載されているヤマハは当該ボードによりフォルマント音声合成の限界に気付き VOCALOID では自然な音声を目指し連結的合成を採用したと思われる最大同時発音数 :1 音 (1 パート ) 音色数 :72 ボイス外形寸法 :138.5W 89D 8.5H mm/53g 付属品 :FD 1 枚 ( デモ曲 5 曲収録 )

29 VOCALOID の技術紹介 ~VOCALOID のねらい ( 開発テーマ )~ PLG-100SG( プラグインボード ) の音声デモ

30 VOCALOID の技術紹介 ~VOCALOID のねらい ( 開発テーマ )~ 連結的合成は以下以下の 2 種類に大別大別されるがされるがヤマハヤマハは歌唱合成歌唱合成に特化するためするため Diphone 合成を選択選択したとしたと思われるわれる 1 単位選択合成 : 例 :HOYA VoiceText 音声 DBに形態素単語成句文節音素などに分類したインデックスを付与し最も適切なインデックスを順に連結して合成する方法長所 : 文章読み上げに対しては最も自然な音声となる短所 : 音声 DBが巨大各音素ごとに音階を付与することが困難 2 Diphone 合成 : VOCALOID 当該言語のDiphone( 音と音の繋がり ) のDBを持ちこのDiphoneを使用して合成する方法のこと長所 : 各音ごとに音階を付与することが容易短所 : 各音を接続した部分で不具合 ( ノイズ等 ) が発生する虞あり

31 VOCALOID の技術紹介単位選択合成の例 :HOYA VoiceTextのデモコーパスベース音声合成 VoiceTextは人間の声に近い自然なイントネーションを実現するためにコーパスベース音声合成を採用しています従来の音声合成のように文章を平坦に読上げるだけではなく任意の文章を読上げる際にも自然なイントネーションと明瞭な発音を実現するため大容量の音声データベースから最適な音素データを検索して合成を行います (HOYAサービス音声合成ソフトウェアより )

32 VOCALOID の技術紹介 ~ 開発課題と特許 ~ VOCALOID システム概要 1. 表現モジュール部にメロディと歌詞とユーザ制御情報とを入力 2. 合成モジュール部は表現モジュール部の出力情報と歌手データベースに基いて歌唱音を合成 3 歌手データベースは対象言語について以下の音の素片を有している母音母音から子音への音子音から母音への音母音の伸ばし音日本語で 500 個英語で 2500 個の素片 Bonada et al, Singing Voice Synthesis Combining Excitation plus Resonance and Sinusoidal plus Residual Models, 2001 より引用

33 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 課題音階を付与した音声 ( 歌唱音 ) を合成しなければならない解決手段母音母音から子音子音から母音伸ばし音を全音階について収録する効果人間の声の素片をもとにしているので自然な歌唱音を合成できる ( 歌詞が聞き取れる ) 対応特許特開歌唱合成装置出願日 :2000 年 12 月 28 日剣持秀紀ほか歌声合成システム VOCALOID- 現状と課題情報処理学会より

34 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 課題全音階について収録するならば歌手が長時間歌い続けることにより声質が変化し収録した音は音声合成システムの素片として適切ではなくなるさらに歌手の疲労 ( 身体面 / 精神面 ) から現実的ではない解決手段所定の音階のみを収録してピッチ変換によって他の音階を生成する効果適切な素片のデータベースを得ると共に録音工数を減らすことができる ( 使える歌声合成システム ) 対応特許特開歌唱合成装置出願日 :2000 年 12 月 28 日剣持秀紀ほか歌声合成システム VOCALOID- 現状と課題情報処理学会 2008 より

35 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 特開号公報歌唱合成装置出願日 :2000 年 12 月 28 日要約課題高品質な歌声を合成する解決手段スペクトルモデル合成 (SMS) 分析合成法において音素または2つ以上の音素連鎖についてSMS 分析を行いデータベース10を作成し合成時に必要な音素または音素連鎖のSMSデータを接続し合成することで歌声を得る前記前記データベース 10 には同じ音素音素あるいはあるいは音素連鎖音素連鎖につきにつき異なるなるピッチピッチダイナミクスダイナミクステンポテンポごとにごとに別個別個の素片データを記憶記憶する調和成分調整手段 22 非調和成分調整手段 23で読み出した素片データの調和成分調和成分およびおよび非調和成分非調和成分を目的目的のピッチピッチに合うようにうように調整調整し継続時間調整手段 24で目的目的のテンポテンポに合うようにうように音素音素またはまたは音素連鎖音素連鎖の長さをさを調整調整し素片素片レベルレベル調整手段 25 でレベルレベル調整調整したした後各素片各素片を接続接続し所望のピッチに対応した調和成分を生成して非調和成分と合成する

36 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 課題音の素片を単純に接続すると不自然となる解決手段 1 伸ばし音の区間で隣り合う diphone( 音の素片 ) のスペクトル包絡を補完することで伸ばし音のスペクトル包絡とする具体的には歌詞 SING ([sin]) は [s-i] の最終フレームと [I-N] の最初のフレームのスペクトル包絡とする効果自然に diphne( 素片 ) を接続できる ( スムース ) 対応特許特開剣持秀紀ほか歌声合成システム VOCALOID- 現状と課題情報処理学会 2008 より引用

37 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 課題音の素片を単純に接続すると不自然となる解決手段 2 伸ばし音の区間で隣り合う diphone( 音の素片 ) の位相を合わせる効果音の素片を接続したタイミングに於ける突然の位相の変化を抑止できる ( スムース ) 対応特許特開剣持秀紀ほか歌声合成システム VOCALOID- 現状と課題情報処理学会 2008 より引用音の素片の位相補間を示す図 Bonada et al,"spectral Approach to the Modeling of the Singing Voice",2001 より引用

38 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 特開号公報歌唱合成方法と装置及び記憶媒体出願日 :2002 年 2 月 27 日要約課題自然な歌唱音声又は高品質の歌唱音声を合成する解決手段音素又は音素連鎖からなる音声素片に対応する音声波形を周波数分析して周波数スペクトル (A) を検出する周波数スペクトル (A) 上で P 1 等の局所的ピークを検知しこれらのピークを含む R 1 等のスペクトル分布領域を指定する各スペクトル分布領域毎に振幅スペクトル分布を周波数軸に関して表わす振幅スペクトルデータと位相スペクトル分布を周波数軸に関して表わす位相スペクトルデータとを生成する各スペクトル分布領域の振幅スペクトル分布を入力音符ピッチに応じて周波数軸上で (B) の様に移動すべく振幅スペクトルデータを修正しこの修正に対応して位相スペクトルデータを修正する所望の音色に対応するスペクトル包絡に沿うようにスペクトル強度を調整する修正された振幅及び位相スペクトルデータを時間領域の合成音声信号に変換する

39 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 課題音符の開始位置はその音符の母音の開始位置でなければならないよって子音 - 母音の素片を音符の開始位置で接続すると子音の発生時間だけ母音が遅れる解決手段子音 - 母音の素片は子音の長さだけ早く配置する効果歌唱タイミングが丁度良く聞こえるようになるこれはスムース自然という開発テーマと合致する対応特許特開剣持秀紀ほか歌声合成システム VOCALOID- 現状と課題情報処理学会 2008 より引用

40 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 特開号公報ボーカルデータ生成装置ボーカルデータ生成方法および歌唱音合成装置出願日 :2001 年 1 月 26 日要約課題音節を構成する音素のうち子音に対向する音素を音符の発生タイミングにあわせて発声することにより伴奏に合わせたバーチャルシンガによる自然な歌唱を実現する解決手段歌詞に対応した音節毎の発音タイミングデータを含むボーカルデータを予め記憶する再生処理再生処理を始めるとめると音符音符ドに対応対応したした音節音節さを発声発声させるとき子音子音 s の発声動作発声動作を音符音符の発音発音タイミングタイミングよりもよりも前に始め母音母音 a の発音発音タイミングタイミングを音符音符ドの発音発音タイミングタイミングに合わせるわせるこれにより伴奏に遅れることなくバーチャルシンガによる自然な歌唱を可能にする

41 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 特開の実装の検証 VOCALOID2 初音ミクの母音あの発音の波形図 VOCALOID2 初音ミクの子音 + 母音かの発音の波形図結果 : あの発音よりもかの発音の方が先に始まっている

42 VOCALOID の技術紹介 ~ 開発課題と特許 ~ 開発課題と特許まとめ VOCALOID の開発に於いてはスムーズで自然な音声というテーマを設定しているそのテーマを解決する手段に枯れた技術である連結的合成を選択したのであろう更にスムースで自然な音声というテーマを実現する上での課題である連結的合成の連結部に於ける不自然さやノイズを解決することに開発のパワーを注いていると思われるこのような開発手法により短期間に高品質な製品を作成することができたと判断する更にこのような開発課題を解決する発明について多くの特許出願を行て特許網を形成し VOCALOID の市場を独占している

43 VOCALOID の技術紹介 ~ ソフトウエア実装 ~ VOCALOID2の実装 (a) スコアエディタ (b) 歌手ライブラリ (c) 合成エンジン音階歌詞制御スコアエディタ Vocaloid Midi Digital Audio Workstation VST midi 歌唱 Midi keyboard 歌手ライブラリ合成エンジン ReWire WAV Digital Audio Workstation 参考 : 剣持秀紀ほか歌声合成システム VOCALOID- 現状と課題情報処理学会 2008 を参考

44 VOCALOID の技術紹介 ~ ソフトウエア実装 ~ スコアエディタ : 音符は従来の音楽シーケンスソフト同様ピアノロールエディタで入力し歌詞は音符に対する属性として入力する効果音楽のプロが慣れ親しんだピアノロールエディタの採用により使いやすい楽曲製作環境を目指したものと思われる

45 VOCALOID の技術紹介 ~ ソフトウエア実装 ~ MIDI フォーマットの採用 VOCALOID の標準入出力ファイルフォーマットは MIDI-SMF フォーマットを拡張したものであるこれを VOCALOID-MIDI という ( 拡張子 VSQ) 既存の MIDI ファイルを読み込んでスコアエディタで歌詞を付与し合成エンジンに歌わせることも可能である効果既存の MIDI フォーマットとの互換性により多くの MIDI 上の資産をインポート可能となる既存の MIDI の各種モジュールが流用可能であるフォーマットを新たに設計する工数が省力化できる

46 VOCALOID の技術紹介 ~ ソフトウエア実装 ~ MIDI フォーマットの採用 +VST 実装スコアエディタと合成エンジンとの間の情報は VOCALOID-MIDI を介してやり取りされている更に VST プラグインが同梱されている効果 VOCALOID-MIDI を出力する VST ホストを作成すれば他のソフトウエア (DAW) から VOCALOID エンジンによる歌唱音合成を行わせることが可能であるサードベンダが VST ホスト機能を有するスコアエディタを作成することも可能である

47 VOCALOID の技術紹介 ~ ソフトウエア実装 ~ MIDI フォーマットの採用実装 MIDI キーボードの入力によって予め入力しておいた歌詞で歌う機能もある効果既存製品と組み合わせて使うことが出来る

48 VOCALOID の技術紹介 ~ ソフトウエア実装 ~ ReWire の採用実装他の音楽ソフトウエア (DAW) とは ReWire によって接続し同期することが可能効果他のソフトウエア (DAW) に伴奏を担当させ VOCALOID エンジンによる歌唱音合成を同期して行わせることが可能である

49 VOCALOID の技術紹介 ~ ソフトウエア実装 ~ ソフトウエア実装のまとめ 1VOCALOID2 は MIDI 規格などの既存規格との親和性を高めているこれにより開発工数を削減してユーザの利便性を向上できる 2 スコアエディタと合成エンジンを分離しているこれによりそれぞれの要素ごとに開発が可能である 3VSTi や ReWire により他の音楽ソフトと連携できるように考えられておりこれもユーザの利便性の向上に寄与するその反面 VOCALOID2 から音楽ソフトに入った初心者は伴奏と歌声との同期のため他の DAW ソフトを購入して VOCALOID2 と連携させなければならずやや敷居が高かったこれは当初 VOCALOID は音楽のプロ向けとして開発されておりコンシュマー向けとは考えられていなかったことと思われる VOCALOID3 はスタンドアロンで伴奏と歌声とを同期する機能が実装されているこれにより初心者でも伴奏との同期が容易になった

50 VOCALOID 製品の概略 VOCALOIDの技術紹介 VOCALOIDの開発経緯 VOCALOIDコミュニティの形成まとめ

51 VOCALOID の開発経緯 VOCALOID の開発経緯は以下のものである 2000 年 3 月開発スタート 2003 年プレス発表とプロトタイプの発表 2004 年 Version1 商品リリース 2007 年バージョンアップ VOCALOID2 商品リリース 2009 年 NetVOCALOID のサービスを発表 2010 年 VOCALOID-flex の提供開始 VOCALOID-board の発表 ipad 向けアプリ ivocaloid, ipod touch 向け ivocaloid VY1t を発表 2011 年 VOCALOID3 商品リリース剣持秀紀ほか歌声合成システム VOCALOID- 現状と課題情報処理学会 2008 Wikipedia VOCALOID より引用

52 VOCALOID の開発経緯開発当初の体制ヤマハの VOCALOID 開発担当者は数名であった ( The VOCALOID CV01 初音ミク DTM マガジン 1 月号増刊より ) スペインのポンペウファブラ大学の Music Technology Group との共同研究によりこのような少ない人的リソースでの開発が可能となったと思われる更に大学などの研究機関との協業は今までにに無い思い切った発想を持った製品を開発する上で必要だったのであろう特許出願 :87 件

53 VOCALOID の開発経緯 Version1 商品初代 VOCALOID エンジン 2003 年 2 月発表製品リリース :2004 年 1 月 ~2006 年 2 月主な機能 1 ピアノロールエディタによる入力 2ReWire による DAW(Digital Audio WS) との同期機能 3VSTi による他の楽曲製作ソフトとの同期機能対応言語 : 日本語と英語ライセンス先 :ZERO-G クリプトンフューチャーメディア

54 VOCALOID の開発経緯 Version2 VOCALOID2 エンジン 2007 年 1 月発表 2007 年 6 月 ~2011 年 4 月に製品発売主な機能 1 ピアノロールエディタによる入力 2ReWire による DAW(Digital Audio WS) との同期機能 3VSTi による他の楽曲製作ソフトとの同期機能 4Midi キーボードによるリアルタイム演奏機能対応言語 : 日本語と英語ライセンス先 :ZERO-G, クリプトンフューチャーメディアインターネット AHS ビーブラッツキューンレコード (7 社に増加 )

55 VOCALOID の開発経緯 VocaListener( ぼかりす ) 産業技術総合研究所とのヤマハとの共同開発人間の歌声に含まれる発音要素 ( ピッチダイナミックス発音の長さなど ) を抽出して VOCALOID の合成音声制御に適用することによりリアルな合成音声を得ることができるシステム後記する VOCALOID3 製品のプラグインとして提供されている先進的なゴールの読めない機能について研究機関と共同開発しているこのような部分では研究機関を利用するのは極めて有効であると思われる特許出願 :13 件

56 VOCALOID の開発経緯 NetVOCALOID サーバ上に VOCALOID を実装し歌声合成機能を WEB-API としてネットワークを介して提供するサービス携帯電話向けサービスゲーム向けサービスなどに適用された VOCALOID を Windows 以外のプラットフォームに適用しユーザと適用商品を拡大するには WEB-API という手段は極めて有効である更にサーバ上に合成エンジンを搭載し WEB-API の入出力を接続するよう外部のサービス提供会社に委託するのみで済むので社内開発リソースを使用しないかつサーバを稼動させるのみであり廉価であると思われる特許出願 :0 件

57 VOCALOID の開発経緯 VOCALOID-flex 話し言葉の表現にも対応したバージョンの VOCALOID 手動で直接ピッチ変化や音素の長さなどを入力するので細かな抑揚なども表現可能 VOCALOID の適用範囲を歌唱合成以外の部分に拡大する有効な手段である

58 VOCALOID の開発経緯 VOCALOID-board ハードウェア化された VOCALOID 電子機器への組み込み用途 Playback モード VOCALOID MIDI データにより歌声を合成 Realtime モードあらかじめ歌詞を入力しておき MIDI キーボードなどのノートメッセージにより歌声を合成 VoiceSynth モード VOCALOID ー flex と同等に動作 Windows 用ソフトウェアよりも格段に高速であると思われるのでリアルタイム演奏などが可能となると思われる

59 VOCALOID の開発経緯 ipad 向けアプリ ivocaloid VY1/VY2 スコアエディタとタッチパッドとの相性は良く操作性は問題なし更に廉価である他の楽曲製作ソフトと連動させスマートデバイス上で楽曲製作を完成させることが可能電車内で楽曲を作成する吊り革 P が出願するか?

60 VOCALOID の開発経緯 iphone 向け VocaloWitter つぶやきや歌のフレーズの入力が可能更に音声ファイルをメール送信する機能 youtube につぶやき音声をアップロードし Twitter でつぶやく機能を搭載 VOCALOID の適用範囲を歌以外に拡大する試み音声ファイルの公開方法が課題

61 VOCALOID の開発経緯 VOCALOID 年 6 月発表 2011 年 10 月以降製品リリース主な機能 1 ピアノロールエディタによる入力トラックエディタ ( ブロック単位編集 ) エディタと歌声ライブラリとを分離して商品化 5 伴奏 (WAV) トラックと VOCALOID の歌声との同時再生 6 VST ホスト機能 (VST エフェクトの使用によるフィルタ ) 7Job プラグインによる自作イフェクト追加機能 ( ぼかりす搭載 ) 8VOCALOID2 の歌声ライブラリのインポート可能対応言語 : 日本語英語中国語韓国語スペイン語ライセンス先 : インターネット AHS ビーブラッツ SBS Artech, 1st PLACE

62 VOCALOID の開発経緯結論先進的な先の見えない開発要素は大学や研究機関と共同研究して特許出願し先が見通せる製品については社内または関連企業と共同で開発しているこのように大学や研究機関を活用することにより他社に真似できない製品を基礎から開発することができその開発成果を特許出願することによって市場を独占することが出来る

63 VOCALOID の開発経緯 Appendix :VOCALOID の将来像の予測 : 主たる製品である VOCALOID2 を VOCALOID3 にバージョンアップし従来のユーザの不満点を着実に解消している VocaloWitter / VOCALOID-flex によって歌声と話言葉の中間にあたる部分の市場を狙い VOCALOID-board のようにハードウェア化による高速処理 ( リアルタイム処理?) を実現している将来は機器内にハードウェアとして組み込むことにより機器がリアルタイムで人間と会話するというインタフェースに用いられるのではないかと思われる

9 現在初音ミクタグ登録数 146,000 件 VOCALOID タグ登録数 173,032 件これらの楽曲は CD

64 VOCALOID コミュニティ形成ニコニコ動画 : P ( プロデューサ ) と呼ばれる VOCALOID の楽曲製作者たちが主に楽曲発表の場として用いている現在初音ミクタグ登録数 146,000 件 VOCALOID タグ登録数 173,032 件これらの楽曲は CD 化されて販売されているものも多いみくみくにしてあげる ( してやんよ ) 再生数 :910 万回 CD: Heartsnative ポニーキャニオンメルト再生数 :700 万回 CD:SuperCell Sony Music

65 VOCALOID コミュニティ形成 MikuMikuDance ( 通称 MMD) 樋口優氏が製作した三次元モデリングソフト ( フリーソフト ) 当初初音ミクの楽曲に付与する映像を製作するために製作された現在物理シミュレーション機能 Kinect によるモーションキャプチャ機能などが付与されている TV 番組 gdgd 妖精 s にも一部採用 MMD 入門書籍

66 VOCALOID コミュニティ形成 UTAU 飴屋 / 菖蒲氏による Windows/MacOSX 用歌声合成ソフトウェア VOCALOID と同様に歌声の音源に基く歌唱音を合成できる自らの歌声をライブラリ化すれば自分の歌声による歌唱音の合成を行うことも可能現在は UTAU コミュニティが形成されており多くの歌声ライブラリが提供されているニコニコ動画の UTAU タグ登録数 40,000 件

67 VOCALOID コミュニティ形成 ~ 結月ゆかり ~ VOCALOID を用いた音楽作品を発表しているアーティストらから成るクリエイターチーム VOCALOMAKETS の企画による製品である VOCALOID3 結月ゆかりはしっかりとしたきれいな歌声を持つ女性をベースに製作したボーカロイド音源です従来のボーカロイドでは再現が難しかったジャズやローテンポの曲でも十分に対応する情感の豊かな余韻が特徴有名ボカロ P(VOCALOID 楽曲製作者 ) が集まった VOCALOMAKETS 監修の元本当に欲しかった VOCALOID の登場です ( 製品紹介 HP より )

68 VOCALOID コミュニティ形成結論当初キャラクターボーカルシリーズのガイドラインでは初音ミクを使ったプログラム作品を禁止していたしかし 2008 年 2 月にガイドラインが改正され MikuMikuDance のようなプログラム作品がリリースされるようになったこのようにコミュニティ形成の為には必要に応じてガイドラインを緩めることが必要であるコミュニティによる様々活動は新たな需要を喚起するような流れを作り出してると共に VOCALOID やキャラクターボーカルシリーズのブランド価値を高めている

69 本日の発表内容 VOCALOID 製品の概略 VOCALOIDの技術紹介 VOCALOIDの技術開発経緯 VOCALOIDコミュニティの形成まとめ

70 まとめ結論先の見えない先進的な開発は大学や研究機関との共同開発が有効である大学や研究機関との共同開発の成果は特許出願し将来の市場を独占できるようにするべきである明確な開発テーマ ( 狙い ) を選定しその開発テーマに沿った方式を選択することが必要である

VocaListener2（ぼかりす2）: ユーザ歌唱の音高と音量だけでなく声色変化も真似る歌声合成システム

VocaListener2（ぼかりす2）: ユーザ歌唱の音高と音量だけでなく声色変化も真似る歌声合成システム twitter アカウント : @VocaListener twitter ハッシュタグ : #vocalis VocaListener2( ぼかりす 2) ユーザ歌唱の音高と音量だけでなく声色変化も真似る歌声合成システムの提案中野倫靖, 後藤真孝 ( 産業技術総合研究所 ) 21 年 7 月 28 日第 86 回音楽情報科学研究会 (SIGMUS) VocaListener1( ぼかりす 1)