(1) (2) 2. Eurydice Eurydice Eurydice 1) Eurydice 2) Eurydice 3) Eurydice Eurydice 2.2 Eurydice 1 hidden Markov model, HMM Viterbi [7] SMF forma

Size: px

Start display at page:

Download "(1) (2) 2. Eurydice Eurydice Eurydice 1) Eurydice 2) Eurydice 3) Eurydice Eurydice 2.2 Eurydice 1 hidden Markov model, HMM Viterbi [7] SMF forma"

あかりたかひ
5 years ago
Views:

1 1, 1 1,a) 2 3 Eurydice Eurydice Eurydice standard File SMF Tempo control for automatic accompaniment while player rests in musical score Nagano Ami 1, 1 Saito Yasuyuki 1,a) Nakamura Eita 2 Sagayama Shigeki 3 Abstract: Automatic music accompaniment system synchronizes with human player s performance. Eurydice is one of such systems that model the generation process of the performance with a probabilistic model, which can therefore follow flexibly the performance in presence of tempo changes, mistakes, skips and repeats. As the tempo control is made by following the player s input, it is a problem while the player s part has a long rest in the score. In this study, we discuss tempo control of the accompaniment by key tapping. To determine a key for the tap operation, wrong key rate was experimentally evaluated across various distances between keys. Then, as a preprocessing, we inserted necessary notes for the tap operation into the standard file (SMF) for Eurydice, so that Eurydice controls tempo and proceeds forward when the player tapped the inserted notes. The inserted notes cause no sounds, because they do not exist in the original musical score. We implemented these new features and confirmed a successful operation. Keywords: automatic accompaniment tempo control file 1. 1 NIT,Kisarazu College, Kisarazu, Chiba , Japan 2 Kyoto University, Sakyo-ku, Kyoto , Japan 3 Meiji University, Nakano-ku, Tokyo , Japan 1 Presently with Chiba University a) saito@j.kisarazu.ac.jp [1], [2] [3]Eurydice [4] c 2016 Information Processing Society of Japan 1

2 (1) (2) 2. Eurydice Eurydice Eurydice 1) Eurydice 2) Eurydice 3) Eurydice Eurydice 2.2 Eurydice 1 hidden Markov model, HMM Viterbi [7] SMF format 1 waiting 2 Eurydice non-waiting Qt [8] Eurydice Windows Mac OS X Eurydice Eurydice Eurydice Eurydice c 2016 Information Processing Society of Japan 2

3 情報処理学会研究報告 n n Through 人の演奏が休みの部分伴奏が主体となる部分 La chasse より図2010/10/27 3 楽譜上で演奏者が休止時演奏者休止区間の楽譜例研究室セミナー ON 1 を解決する 4. 演奏者休止区間でのテンポ制御方法図 4 Through をしない場合の自動伴奏システムの入出力 /10/ 頭部動作によるテンポ制御演奏に直接関係しない頭部動作によるテンポ制御方法を考察するジェスチャー認識による自動譜めくりの研究では頷き動作による制御を行っている [9] この手法を取 OFF り入れ 1 回の頷きを 1 拍とし 4 回の頷ききで 4 拍 1 小節 44 拍子として扱うことが考えられるしかしこの手法ではテンポの速い曲の指示が困難であるまた現状では頷き動作を正確に捉えるために意図的図 5 タップ動作によるテンポ制御を用いる場合における自動伴奏システムの入出力通常演奏時 /10/27 な遅延を入れているためリアルタイム性が損なわれる 4.2 タップ動作によるテンポ制御鍵盤のタップ動作によりテンポを制御する方法を考察する演奏に使用しないキーに順次進行するという役割を与え打鍵しても音を出力しないようにできればそのキー OFF を打鍵することはいわば指揮者の指揮の振りに対応づけれられるタップ動作は演奏時の動作と差異がないため演奏者が行う動作と共に順次進行やテンポ推定の制御は今まで通り行えるという利点があるそこで本研究ではテンポ制御方法はキーのタップ動作によるものを採用する以後テンポ制御に用いる上記の演奏に使用しないキーをタップキーと呼ぶことにする指示するテンポが一定の場合演奏者休止区間にタップ動作を継続することは演奏者の負担となるこの問題を解決するにはある程度タップを行ってテンポが一定になった場合にタップ動作を行わなくても直前のテンポを引き継ぐようにすればよいと考えられるテンポ制御の処理の流れをまとめると以下の項目に分けられる図 6 タップ動作によるテンポ制御を用いる場合における自動伴奏システムの入出力タップ動作時 2010/10/27 12 Through にしておきタップ動作のときはタップキーの音を発音しないようベロシティを 0 に設定を行う Through をしない場合の自動伴奏システムの入出力を図 4 に示すまたタップ動作によるテンポ制御を用いる場合における通常演奏時の自動伴奏システムの入出力を図 5 にタップ動作時を図 6 に示す項目 1 と項目 2 の処理を実装した項目 3 の順次進行とテンポ推定は従来の制御を用いることができる 5. タップキーの決定方法の検討タップキーが押されたか判定を行うキーのタップ動作で行うテンポ制御においてテンポを 2) タップキーの場合音を出力しない指示するために用いるタップキーは曲中で用いない音高 3) 順次進行及びテンポ推定を行うのキーとする演奏者が任意でタップキーを決定しても 1) よいのだがわかりやすくミスタッチとなる頻度が低く項目 2 のタップキーの場合音を出力しないといなるキーであることが求められるこのことを鑑みるとう部分では演奏しているピアノ音は OFF*1 そしてタップキーとして用いることのできるキータップキーのアコースティックピアノにおいてもたとえばヤマハのサイレントピアノシリーズを用いたりピアノ消音ユニットをアップライトピアノに追加装着すれば演奏音は消せるが [10] 現状の Eurydice では入力が信号であることを考慮すると本研候補のうちで一番高い音か低い音とすればよいと考えら *1 c 2016 Information Processing Society of Japan れるまた実装も容易であるしかしこの方法では演究においては電子ピアノを用いることが最適である 3

1 17 17 0 3 0 3 7 9 10 8 C4 7. 7 [11] 8 6. 1 7.

4 C [11] BPM = c 2016 Information Processing Society of Japan 4

5 C % Eurydice Eurydice standard File SMF SMF C++ Midifile [12] 1) 2) 1 SMF SMF Eurydice 1) SMF 2) 3) 4) SMF 15 SMF 16 Eurydice non-waiting 9. Eurydice c 2016 Information Processing Society of Japan 5

6 15 SMF musical-instruments/keyboards/about/silent/ [11] HMM PianoFingering/japanese.html [12] Midifile C++ library for parsing standard files 16 SMF standard file SMF 1 Eurydice SMF Eurydice [1] Dannenberg, R.B.: An on-line algorithm for real-time accompaniment, Proc. ICMC, pp (1984). [2] Vercoe, B.: The synthetic performer in the context of live performance, Proc. ICMC, pp (1984). [3] HMM MUS, pp (2006). [4] / [ ///() ] Eurydice () [5] Goebl W.: Melody lead in piano performance: Expressive device or artifact?, J. Accoustical Society of America, Vol.110, No.1, pp (2001). [6], Vol.48, No.1, pp (2007). [7] Vol.54, No.4, pp (2013). [8] Qt, [9] Jibiki, H., Shimizu, T., Saito, Y., Nakamura E. and Sagayama, S.: A study of automatic page turning of musical scores by detecting player s nods, Proc. ICAI PB1-08, pp (2015). [10] c 2016 Information Processing Society of Japan 6

IPSJ SIG Technical Report Vol.2012-MUS-96 No /8/10 MIDI Modeling Performance Indeterminacies for Polyphonic Midi Score Following and

IPSJ SIG Technical Report Vol.2012-MUS-96 No /8/10 MIDI Modeling Performance Indeterminacies for Polyphonic Midi Score Following and MIDI 1 2 3 2 1 Modeling Performance Indeterminacies for Polyphonic Midi Score Following and Its Application to Automatic Accompaniment Nakamura Eita 1 Yamamoto Ryuichi 2 Saito Yasuyuki 3 Sako Shinji 2