JP2003114674A

JP2003114674A - 演奏情報表示装置、及びプログラム

Info

Publication number: JP2003114674A
Application number: JP2001309074A
Authority: JP
Inventors: Naoyuki Komata; 直幸小股
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 2001-10-04
Filing date: 2001-10-04
Publication date: 2003-04-18

Abstract

(57)【要約】【課題】発音させるべき楽音の音高やその発音期間以
外の演奏情報をユーザに提示でき、更にはユーザがより
迅速、且つ容易に把握できるように演奏情報を提示でき
る演奏情報表示装置を提供する。【解決手段】発音させるべき楽音を表すノートオブジ
ェクト３２０の形状は、スクロール方向上の長さは楽音
の発音持続時間の長さから決め、その高さは楽音のベロ
シティ値（音量）から決める。それを表示させるうえで
の視点は、表示鍵盤３０１の手前側の上方から見下ろし
つつ、その表示鍵盤３０１を斜めに見る方向とさせる。
それにより、オブジェクト３２０の視認性の低下を回避
させつつ、それを３次元的に表示させてスクロールさせ
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、発音させるべき楽
音の音高や音高の楽音の発音開始タイミング、或いは楽
音の発音持続時間といった演奏情報をスクロール表示に
よりユーザに提示するための技術に関する。

【０００２】

【従来の技術および発明が解決しようとする課題】現在
では、多くの鍵盤楽器に、演奏の進行に応じて押鍵（操
作）すべき鍵を順次、ユーザ（演奏者）に通知していく
ナビゲーション機能が搭載されている。楽音の音高別
に、その音高の楽音の発音持続時間を示すオブジェクト
をスクロール表示させる演奏情報表示装置は、例えばそ
のナビゲーション機能として鍵盤楽器に搭載される。

【０００３】その演奏情報表示装置では、オブジェクト
のスクロールする方向上の長さは発音持続時間に応じて
変化させる。そのオブジェクトの端は、それが発音持続
時間を示す楽音の発音を開始させるタイミングで消去を
開始、或いは予め定めた位置に到達させる。それによ
り、そのオブジェクトのスクロール表示を通して、発音
させるべき楽音の音高、その楽音の発音を開始させるタ
イミング、及びその楽音を消音させるタイミングを表現
している。このため、そのスクロール表示に従って楽音
を発音させれば、即ちそのオブジェクトが発音持続時間
を示す楽音の音高が割り当てられた鍵の押鍵、及びその
離鍵を行えば、発音させるべき楽音を正確に発音できる
ようになっている。なお、楽音を発音させているべき発
音期間は、楽音の発音を開始させるタイミング、及びそ
の楽音を消音させるタイミング（発音持続時間）で表さ
れる。

【０００４】従来の演奏情報表示装置は、上述したよう
なオブジェクトをスクロール表示させるようになってい
た。しかし、演奏情報表示装置を利用するユーザの多く
は技術的に未熟である。そのようなユーザにとっては、
オブジェクトのスクロール表示に従って演奏を行うのは
困難であるというのが実情である。たとえスクロール表
示に従って演奏を正しく行えたとしても、その演奏が音
楽的表現の豊かなものになるとは思われない。このた
め、発音させるべき楽音の音高、その楽音期間（発音を
開始させるタイミング、及びそれの発音持続時間（消音
させるタイミング））以外の演奏情報をユーザに提供す
る必要があると考えられる。

【０００５】オブジェクトを表示させてのスクロール
（移動）は、オブジェクトを配置する仮想的な平面の垂
直方向を視点にして行うようになっていた。それによ
り、オブジェクトは全て同じように表示させていた。

【０００６】技術的に未熟なユーザは余裕を持って演奏
を行えないのが普通である。そのようなユーザにとって
は、全てのオブジェクトを同じように表示させると、そ
のなかで注目すべき楽音、例えば現在、発音させるべき
タイミングとなった楽音、或いはそのタイミングが近い
楽音のオブジェクトを必ずしも迅速に探し出せないと考
えられる。言い換えれば、提示した（表示させた）演奏
情報の把握をユーザが必ずしも迅速に行えないと考えら
れる。このことから、演奏情報の把握をユーザがより迅
速に行えるようにするには、どのようなオブジェクトを
どのように表示させるかといったことが重要であると考
えられる。

【０００７】本発明の課題は、発音させるべき楽音の音
高やその発音期間以外の演奏情報をユーザに提示できる
演奏情報表示装置、更にはユーザがより迅速、且つ容易
に把握できるように演奏情報を提示できる演奏情報表示
装置を提供することにある。

【０００８】

【課題を解決するための手段】本発明の第１、及び第２
の態様の演奏情報表示装置は、共に、演奏情報をスクロ
ール表示によりユーザに提示することを前提として、そ
れぞれ以下の手段を具備する。

【０００９】第１の態様の演奏情報表示装置は、発音さ
せるべき楽音の音高、その楽音の発音開始タイミング、
及びその楽音の発音持続時間を該楽音単位で表す曲デー
タを取得する曲データ取得手段と、曲データ取得手段が
取得した曲データ中で表されている楽音に関する該楽音
の発音持続時間を含む複数の演奏情報の各内容に基づく
形状のオブジェクトを表示装置上にスクロール表示させ
る演奏情報表示手段と、を具備する。

【００１０】なお、上記演奏情報表示手段は、オブジェ
クトを３次元的に表示させて、該オブジェクトの形状で
複数の演奏情報を表現させる、ことが望ましい。そのオ
ブジェクトでは、発音持続時間を長さで表す方向の交差
方向上の長さで楽音を発音させるべき音量を複数の演奏
情報の一つとして表現させる、ことが望ましい。また、
オブジェクトを配置する仮想的平面の垂線に対する交差
方向を視点にして、該オブジェクトを表示させる、こと
が望ましく、更には楽音の音高が鍵盤の黒鍵に対応する
か否かに応じて、オブジェクトの表示形態を変更させ
る、ことが望ましい。

【００１１】第２の態様の演奏情報表示装置は、発音さ
せるべき楽音の音高、その楽音の発音開始タイミング、
及びその楽音の発音持続時間を該楽音単位で表す曲デー
タを取得する曲データ取得手段と、曲データ取得手段が
取得した曲データ中で表されている楽音の発音持続時間
を少なくとも表現するオブジェクトを３次元的に表示装
置上に表示させてスクロール表示させる演奏情報表示手
段と、を具備する。

【００１２】本発明の第１、及び第２の態様のプログラ
ムは、共に、演奏情報をスクロール表示によりユーザに
提示する演奏情報表示装置に実行させることを前提と
し、それぞれ以下の機能を実現させる。

【００１３】第１の態様のプログラムは、発音させるべ
き楽音の音高、該音高の楽音の発音開始タイミング、及
び該楽音の発音持続時間を該楽音単位で表す曲データを
取得する機能と、取得する機能により取得した曲データ
中で表されている楽音に関する該楽音の発音持続時間を
含む複数の演奏情報の各内容に基づく形状のオブジェク
トを表示装置上にスクロール表示させる機能と、を実現
させる。

【００１４】第２の態様のプログラムは、発音させるべ
き楽音の音高、該音高の楽音の発音開始タイミング、及
び該楽音の発音持続時間を該楽音単位で表す曲データを
取得する機能と、取得する機能により取得した曲データ
中で表されている楽音の発音持続時間を少なくとも表現
するオブジェクトを３次元的に表示装置上に表示させて
スクロール表示させる機能と、を実現させる。

【００１５】本発明では、楽音の発音持続時間を含む複
数の演奏情報を基に、表示すべきオブジェクトの形状を
決定し、その決定した形状でオブジェクトをスクロール
表示させる。それにより、そのようにして表示させたオ
ブジェクトを通して、発音させるべき楽音の音高やその
発音期間以外の演奏情報をユーザに提示することが可能
となる。そのような演奏情報を提示することにより、ユ
ーザはより容易な演奏、より適切な形での演奏、或いは
音楽的表現がより豊かな演奏を行えるようになる。その
結果、ユーザはより効率的な練習を行ったり、音楽的表
現力をより迅速に身に付けられるようになる。

【００１６】本発明では、楽音の発音持続時間を少なく
とも表現するオブジェクトを３次元（立体）的に表示さ
せてスクロールさせる。３次元的に表示させたオブジェ
クトは、２次元的に表示させたオブジェクトと比較し
て、オブジェクト自体が持つ情報量が多くなって目立つ
ようになるだけでなく、その形状を利用したオブジェク
トの表示のさせかたも行えるようになる。このようなこ
とから、ユーザに注目させるべき度合いが高いオブジェ
クトの視認性の向上や強調を行えるようになる。それに
より、ユーザがより迅速、且つ容易に把握できるように
演奏情報を提示することも可能となる。

【００１７】

【発明の実施の形態】以下、本発明の実施の形態につい
て、図面を参照しながら詳細に説明する。図１は、本実
施の形態による演奏情報表示装置を搭載した電子楽器の
回路構成図である。

【００１８】本実施の形態による演奏情報表示装置は、
電子楽器のユーザが行う演奏をナビゲートさせるために
搭載されている。それを搭載した電子楽器は、図１に示
すように、楽器全体の制御を行うＣＰＵ１０１と、その
ＣＰＵ１０１が実行するプラグラムや各種曲データ、及
び各種制御データ（画像表示用の各種データを含む）な
どを格納したＲＯＭ１０２と、そのＣＰＵ１０１がワー
ク用に用いるＲＡＭ１０３と、多数の鍵を有する鍵盤１
０４と、ＣＰＵ１０１から送られたデータを画面上に表
示する表示部１０５と、ユーザが操作の対象とする操作
部１０６と、ＣＰＵ１０１の指示に従って楽音の波形デ
ータを生成する音源１０７と、その音源１０７が出力し
た波形データをサウンドに変換して放音するサウンドシ
ステム１０８と、ＣＰＵ１０１を各部１０２〜１０７と
接続するバス１０９と、を備えて構成されている。

【００１９】上記表示部１０５は、例えばＣＲＴ、或い
は液晶表示装置などの表示装置である。操作部１０６
は、例えば各種スイッチやキー等の複数の操作子、及び
それら操作子への操作を検出する検出回路から構成され
た入力装置である。サウンドシステム１０８は、例えば
Ｄ／Ａコンバータ、アンプ、及びスピーカからなるシス
テムである。

【００２０】図２は、上記曲データの構成を説明する図
である。その曲データは、ＲＯＭ１０２に複数、格納さ
れており、それぞれ、複数のトラックデータから構成さ
れている。各トラックデータは、それぞれ、対象とする
演奏を自動的に再生するための演奏データ、或いはその
演奏に係わる設定などを自動的に変更していくための設
定データである。本実施の形態では、左手で行う演奏の
再生用、右手で行う演奏の再生用、伴奏１の再生用、伴
奏２の再生用、及びテンポ変更用などに対象を分類し
て、各分類毎にトラックデータを用意している。

【００２１】各トラックデータは、それぞれ１つ以上の
イベントデータから構成される。そのイベントデータ
は、イベントの内容を表す複数のパラメータのデータ
と、そのデータを処理すべきタイミングを示す時間デー
タと、から構成されている。そのパラメータとしては、
特に図示していないが、イベントのタイプを示すもの
（以降、そのデータをタイプデータと呼ぶ）、タイプ別
に用意されるパラメータなどがある。

【００２２】タイプデータが表すイベントのタイプとし
ては、楽音の発音を指示するノートイベントやテンポの
変更を指示するテンポイベント、などがある。それら各
イベントが表示の対象となる演奏情報である。ノートイ
ベントでは、パラメータ（データ）として、楽音の音高
を示す音高データ、その音量を示すベロシティデータ、
発音持続時間を示すゲートタイムデータ、その楽音を発
音させるためにユーザが使うべき指を示す指番号デー
タ、及びその楽音に対応する音符を示す音符データを用
意している。テンポイベントでは、新たに設定すべきテ
ンポ値を示すデータを用意している。

【００２３】なお、上記曲データには、ノートイベント
の内容を表すデータ（パラメータ）として、指番号デー
タや音符データを予め用意しているが、それらのデータ
は必ずしも用意しなくても良い。曲データとは別に、或
いはその曲データの内容を解析して取得するようにして
も良い。それらのデータ形式についても特に限定される
ものではない。

【００２４】以上の構成において、その動作を説明す
る。ＣＰＵ１０１は、電源がオンされると、ＲＯＭ１０
２に格納されているプログラムを読み出して実行するこ
とにより、楽器全体の制御を開始し、表示部１０５には
初期画面を表示させる。それ以降は、ユーザの鍵盤１０
４、或いは操作部１０６への操作に応じて制御を行う。

【００２５】ＣＰＵ１０１は、その初期画面を表示させ
るための画像データを、例えばＲＡＭ１０３を作業用に
使用して、ＲＯＭ１０２から読み出した複数の画像デー
タを用いて生成する。そのようにして生成された初期画
面の画像データを送られた表示部１０５は、それを特に
は図示しないメモリ（例えばデュアルポートＲＡＭ）に
格納する。それ以降における表示内容の全体的、或いは
部分的な変更は、例えばＣＰＵ１０１が、そのメモリに
格納された画像データ中でデータを書き換えるべき部分
の画像データをＲＯＭ１０２から読み出すか、或いはそ
れを用いて生成し、そのようにして得た画像データを、
そのメモリ中の画像データを書き換えるべき部分に上書
きすることで行われる。そのようにして、ＣＰＵ１０１
は、表示部１０５に、表示すべき画面やメッセージを表
示させたり、演奏情報をスクロールさせて表示させる。

【００２６】演奏情報のスクロール表示は、ユーザが操
作部１０６を操作して、例えば自動再生の対象とする曲
データを選択した後、その自動再生を指示した場合に行
うようになっている。本実施の形態では、ノートイベン
トの内容を示すイベントデータ中で表されている演奏情
報を対象にして、以下のようにスクロール表示を行って
いる。図３〜図５を参照して具体的に説明する。

【００２７】図３は、そのスクロール表示方法を説明す
る図である。本実施の形態では、図３に示すように、多
数の白鍵、黒鍵で表す鍵盤（ユーザが演奏操作の対象と
する鍵盤１０４との混同を避けるために、以降、表示鍵
盤と呼ぶ）３０１、及びその鍵盤３０１と同一の平面上
となるように配置したスクロール面３１０を常時、表示
させ、発音させるべき楽音を示すノートオブジェクト３
２０は、そのスクロール面３１０上のその音高に応じた
位置に表示させている。スクロール面３１０上に表示さ
せたノートオブジェクト３２０は、曲データの自動演奏
の進行に合わせて図中の矢印で示すスクロール方向に移
動させ、表示鍵盤３０１の先端に位置に達した部分は消
去させている。それにより、スクロール面３１０に対応
する演奏範囲に対応する部分だけを表示させる形でノー
トオブジェクト３２０のスクロール表示を行っている。
そのスクロール面３１０は、特許請求の範囲に記載の仮
想的平面と少なくとも平行な平面である。

【００２８】そのスクロール面３１０上には、小節の区
切りを示す小節線３１１と、表示鍵盤３０１の白鍵に合
わせて領域を分ける線３１２と、を配置している。その
先３１１を配置することにより、上記ノートオブジェク
ト３２０が示す楽音の音高をユーザがより容易に把握で
きるようにさせている。

【００２９】スクロール面３１０や表示鍵盤３０１を表
示させるうえでの視点は、図３に示すように、その面３
１０の垂線に対する交差方向とさせている。より具体的
には、表示鍵盤３０１よりスクロール方向側（鍵盤を演
奏操作する際にユーザが位置する側）から、その鍵盤３
０１上の鍵を低音側から高音側を斜めに見る方向で、且
つ、その鍵盤３０１を上方から斜めに見る方向を視点と
させている。

【００３０】そのような視点でノートオブジェクト３２
０を表示させてスクロールさせた場合、各音高では、最
も早く発音させるべき楽音のノートオブジェクト３２０
が先頭に位置するようになって、他のノートオブジェク
ト３２０よりも強調されることになる。そのノートオブ
ジェクト３２０が３次元的な形状であっても、ノートオ
ブジェクト３２０が表す演奏情報をユーザが把握できな
くなる形で他のノートオブジェクト３２０がそれを隠し
てしまうようなことが回避される。２次元的な形状と比
較して大きな情報量を持つことによって目に付きやすい
という利点を常に生かせるようになる。このようなこと
から、ユーザにとっては、演奏を行ううえで注目すべき
度合いが高いノートオブジェクト３２０を常に極めて容
易、且つ迅速に探し出せるようになる。即ちそのノート
オブジェクト３２０で表現する演奏情報を常に極めて容
易、且つ迅速に把握できるようになる。

【００３１】また、そのような視点では、ノートオブジ
ェクト３２０が自身に向かってスクロール（移動）して
くるような印象をユーザに与えることになる。実際に鍵
盤１０４に向かっている視点と近いため、感覚的な違和
感が抑えられて、ノートオブジェクト３２０のスクロー
ル表示によって表現される各種タイミングもより把握し
易くなる。そのようにして演奏の流れがより把握し易く
なる結果、ユーザはスクロール表示に合わせた演奏をよ
り容易に行えるようになる。

【００３２】図３中のオブジェクト３０２は、鍵盤１０
４のなかでユーザが現在、押鍵している鍵、言い換えれ
ば実際の演奏によって発音させている楽音の音高を確認
させるために表示させたものであり、表示鍵盤３０１上
のその鍵に対応する鍵の表示色も他の同じ種類の鍵のそ
れとは異ならせている。それにより、表示部１０５を見
るだけで、演奏すべき内容の他に、実際の演奏内容をユ
ーザが確認できるようにさせている。なお、オブジェク
ト３０２については、以降、実ノートオブジェクトと呼
ぶことにする。

【００３３】本実施の形態では、上記ノートオブジェク
ト３２０が示す楽音の音高が白鍵に割り当てられた音高
か否か、及びその楽音は左手で発音させるべきか否かの
２つの条件のうちで満たしている条件に応じてその表示
形態を異ならせている。その表示形態は、図４に示すよ
うに、ノートオブジェクト３２０をスクロール方向上の
先頭に位置する６面体の形状をした前部３２０ａとそれ
に続く後部３２０ｂとに分け、その２つの部分３２０
ａ、３２０ｂの表示色を変えることで異ならせている。
具体的には、図４（ａ）、（ｂ）と図４（ｃ）、（ｄ）
とを対比すれば明らかなように、楽音の音高が白鍵に対
応しているか否かに応じて前部３２０ａの表示色を異な
らせ、図４（ａ）、（ｃ）と図４（ｂ）、（ｄ）とを対
比すれば明らかなように、楽音を左手で発音させるべき
か否かに応じて後部３２０ｂの表示色を異ならせてい
る。そのようにして、発音させるべき楽音が左手のパー
トと右手のパートの何れに属しているか、その楽音を発
音させるために押鍵すべき鍵の種類をノートオブジェク
ト３２０で表すことにより、それらの演奏情報を容易に
把握できる形でユーザに提示している。

【００３４】図５は、上記ノートオブジェクト３２０の
形状を説明する図である。その図５を参照して、ノート
オブジェクト３２０の形状やその決定方法、及びその表
示位置について詳細に説明する。その形状や表示位置
は、ＣＰＵ１０１によって決定される。

【００３５】そのノートオブジェクト３２０は３次元の
形状としている。３次元の座標軸は図５に示すように定
めている。Ｘ軸は、表示鍵盤３０１の鍵が並ぶ方向と平
行であり、Ｚ軸は線３１２（スクロール方向）と平行で
ある。Ｙ軸はそれらＸ軸、Ｚ軸と垂直である。なお、Ｘ
軸については、その軸上の位置は楽音の音高を表してい
ることから、以降、音階軸とも呼ぶことにする。Ｚ軸に
ついては、その軸上の位置は時間を表していることか
ら、以降、時間軸とも呼ぶことにする。

【００３６】各ノートオブジェクト３２０は、図５に示
すように、点ａ（ｘ０，ｙ０，ｚ０）、ｂ（ｘ１，ｙ
０，ｚ０）、ｃ（ｘ１，ｙ１，ｚ０）、ｄ（ｘ０，ｙ
１，ｚ０）、ｅ（ｘ０，ｙ０，ｚ１）、ｆ（ｘ１，ｙ
０，ｚ１）、ｇ（ｘ１，ｙ１，ｚ１）、ｈ（ｘ０，ｙ
１，ｚ１）、ｉ（ｘ０，ｙ０，ｚ２）、及びｊ（ｘ１，
ｙ０，ｚ２）の計１０個の点で形状を管理している。

【００３７】それらの点の座標値を表すシンボルｘ０、
ｘ１、ｙ０、ｙ１、ｚ０、ｚ１、及びｚ２において、シ
ンボルｙ０で表すＹ軸上の座標値だけが固定値である。
ｚ１で表すＺ軸上の座標値はｚ０で表す座標値に一定値
を加算した値である。ｘ０、及びｘ１は、楽音の音高
（イベントデータ中の音高データ）によって決まる値で
ある。ｘ０、或いはｘ１が表す座標値と音高との対応関
係を定義したテーブルを参照して、それらの値は決定し
ている。それらの差は一定値として、ノートオブジェク
ト３２０のＸ軸上の幅は楽音の音高が割り当てられた鍵
の種類が白鍵か否かに係わらず変更しないようにさせて
いる。なお、実ノートオブジェクト３０２におけるｘ
０、ｘ１に対応する座標値は、鍵盤１０４から送出され
る音高データにより同様に決定している。そのＺ軸上の
幅は固定とさせている。

【００３８】ｙ１は、楽音の音量を示すベロシティ値
（イベントデータ中のベロシティデータ）から決定して
いる（ｙ０の座標値は固定値である）。本実施の形態で
は、ｙ１が表す座標値とベロシティ値の対応関係を定義
したテーブルを参照して決定している。ベロシティ値が
大きくなるほど、ｙ１が表す座標値も大きくさせてい
る。言い換えれば、ノートオブジェクト３２０のＹ軸上
の幅は、楽音を発音させるべき音量が大きくなるほど大
きくさせている。それにより、ノートオブジェクト３２
０のＹ軸上の幅から楽音を発音させるべき音量の大きさ
をユーザが把握できるようにさせている。ここでは、ベ
ロシティ値の値域が０〜１２７とすると、例えば０、１
〜２３、２４〜４７、４８〜７１、７２〜９５、９６〜
１１９、１２０〜１２７、の７つの値域に分け、値が０
でない６つの値域を対象にすることにより、ノートオブ
ジェクト３２０のＹ軸上の幅は６段階で切り換えるよう
にしている。なお、実ノートオブジェクト３０２におけ
るｙ１に対応する座標値も、鍵盤１０４から送出される
ベロシティ値によって同様に決定している。

【００３９】楽音のベロシティ値に応じてＹ軸上の幅が
切り換えられるのは前部３２０ａであり、そこの幅を最
大にして、後部３２０ｂではその幅を徐々に小さくさせ
ている。これは、前部３２０ａが他のノートオブジェク
ト３２０に隠れてしまう部分をできる限り小さくさせ
て、その前部３２０ａで表す楽音のベロシティ値やそれ
を発音させるべきタイミングをユーザが確実、且つ容易
に把握できるようにさせるためである。

【００４０】ｚ２が表す座標値とｚ０が表す座標値の差
は、楽音の発音持続時間（イベントデータ中のゲートタ
イムデータ）に応じて決定している。Ｚ軸全体の幅で表
される時間（以降、表示範囲時間と呼ぶ）はユーザが変
更できるようにさせている。このことから、それらの差
は、Ｚ軸上の単位長さが表す時間で発音持続時間を割っ
て得られる値とさせている。そのようにして、ノートオ
ブジェクト３２０のＺ軸上の幅は発音持続時間に応じた
大きさとさせることにより、その発音持続時間をユーザ
が把握できるようにさせている。

【００４１】ｚ０が表す座標値は、曲データの自動演奏
の進行に応じて変更する。それにより、その自動演奏の
進行に合わせてノートオブジェクト３２０をスクロール
させる。

【００４２】このようにして、ノートオブジェクト３２
０（実ノートオブジェクト３０２）の形状を決定してい
る。それを構成する前部３２０ａの表示色は、楽音の音
高とそれが割り当てられた鍵の種類の対応関係を定義し
たテーブルを参照して、その音高が白鍵（黒鍵）に割り
当てられているか否かに応じて切り換えている。後部３
２０ｂの表示色は、イベントデータが属するトラックデ
ータが左手（右手）演奏用のものか否かに応じて切り換
えている。それにより、音高が割り当てられた鍵の種
類、その音高の楽音のパートに応じて、図４に示すよう
にノートオブジェクト３２０を表示させている。

【００４３】上述したようにして形状が決定されるノー
トオブジェクト３２０は３次元図形である。しかし、そ
れは表示部１０５に２次元で表示させなければならな
い。即ち３次元空間データ（表示するオブジェクトの形
状や表示位置を表す各点の座標値を少なくとも含むデー
タ）を２次元平面データに変換しなければならない。そ
の変換は、例えば各オブジェクトの形状や表示位置を決
定して生成した１画面（ここでは、スクロール表示の対
象となる部分の領域という意味である。以降、混乱を避
けるために、演奏画面と呼ぶことにする）分の空間デー
タを対象にする場合には、その空間データに対してＸ、
Ｙ、及びＺ軸の各軸回りに回転させる処理を施した後、
ＸＹ平面に対して平行に投影させることで行う。

【００４４】そのような変換を行って平面データを得た
後は、複数の点によって表される面のなかで表示される
部分を特定し、特定した部分毎に、その部分を構成する
画素のデータとして、その部分の表示色を表す値を書き
込む形で１画面分の画像データを生成する。音高が低い
楽音のノートオブジェクト３２０ほど、手前側に表示さ
せることから、表示される部分の特定は低音側のノート
オブジェクト３２０から行う。そのようにして生成した
画像データを表示部１０５に送って表示させることによ
り、図３に示すように各種オブジェクトを表示させての
スクロール表示を行わせる。その画像データは、状況に
より、演奏画面全体、或いはその一部分を対象に生成し
て表示部１０５に送っている。

【００４５】なお、本実施の形態では、３次元空間デー
タから２次元平面データへの投影は平行に行うようにし
ているが、例えば図６に示すように、遠近法を取り入れ
た形で投影を行うようにしても良い。しかし、発音させ
るべき楽音をユーザに強調させるために、発音させるべ
きタイミングが早い楽音のノートオブジェクト３２０ほ
ど、大きくなるように表示させることが望ましい。その
図６では、視点も図３とは異ならせ、ノートオブジェク
ト３２０の音階軸上の幅は音高が白鍵に対応するか否か
に応じて異ならせ、表示色は１色とさせている。その視
点は、図３や図６におけるそれらと異ならせても良い。

【００４６】ノートオブジェクト３２０については、そ
の形状は図３に示すものと異ならせても良い。例えば図
７（ａ）〜（ｅ）にそれぞれ示す変形例１〜５のうちの
何れかを採用しても良い。それら以外の形状を採用して
も良い。図７（ｃ）に示す変形例３は、それが表す音高
の楽音を発音させるために使うべき指を番号（図中の
「１」）を前部に配置するようにしたものである。図７
（ｄ）に示す変形例４は、それが表す楽音の対応する音
符を示すシンボルを前部に配置するようにしたものであ
る。図７（ｅ）に示す変形例５は、それが表す楽音の音
高（音名）を示すシンボル（図中の「ｃ」）を前部に配
置するようにしたものである。図７（ｃ）〜（ｅ）から
明らかなように、ノートオブジェクト３２０は３次元
（立体）的に表示させることから、何らかの演奏情報を
表すシンボルも把握し易いように配置することができ
る。

【００４７】上述したようなノートオブジェクト３２０
を表示させてスクロールさせることにより、ユーザにと
っては従来の演奏情報表示装置と比較して、より多くの
演奏情報をより容易、且つ迅速に得られるようになる。
このため、ユーザがより適切な形で演奏を行うのを支援
することになる。なた、音楽的表現がより豊かな演奏も
より短時間で行えるようになる。

【００４８】次に、上述したような演奏情報のスクロー
ル表示を実現するＣＰＵ１０１の動作について、図８〜
図１４に示す各種フローチャートを参照して詳細に説明
する。

【００４９】図８は、全体処理のフローチャートであ
る。この全体処理は、ユーザが電源をオンさせた場合
に、ＣＰＵ１０１が、ＲＯＭ１０２に格納されているプ
ログラムを実行することで実現される処理の全体的な流
れを表したものである。始めに図８を参照して、その全
体処理について詳細に説明する。

【００５０】先ず、ステップ８０１では、楽器を状態を
所定の状態に初期化する初期化処理を実行する。次に移
行するステップ８０２では、操作部１０６を構成する各
種スイッチの状態を示すデータを、その操作部１０６の
検出回路から取り込む処理を実行する。その後はステッ
プ８０３に移行する。

【００５１】ステップ８０３では、操作部１０６の検出
回路から取り込んだデータを解析して、何らかのスイッ
チがユーザに操作されたか否か判定する。操作部１０６
を構成する何らかのスイッチをユーザが操作した場合、
判定はＹＥＳとなってステップ８０４に移行する。そう
でない場合には、判定はＮＯとなってステップ８１２に
移行する。

【００５２】電源のオン／オフを指示するための電源ス
イッチは、操作部１０６を構成するスイッチとして設け
られている。ステップ８０４では、その電源スイッチが
操作されたか否か判定する。そのスイッチをユーザが操
作した場合、判定はＹＥＳとなり、ここで一連の処理を
終了する。そうでない場合には、判定はＮＯとなってス
テップ８０５に移行する。

【００５３】ステップ８０５では、操作部１０６を構成
する、曲データの再生（自動演奏）の開始を指示するた
めのスタートスイッチが操作されたか否か判定する。そ
のスイッチをユーザが操作した場合、判定はＹＥＳとな
り、ステップ８０６に移行して、現在、選択されている
曲データの再生を開始するための演奏開始処理を実行し
た後、ステップ８１２に移行する。そうでない場合に
は、判定はＮＯとなってステップ８０７に移行する。そ
の演奏開始処理を実行した際に、曲データの再生を管理
するために用意した変数Ｐｌａｙｆｌｇには再生中であ
ることを表す値の１が代入される。

【００５４】ステップ８０７では、操作部１０６を構成
する、曲データの再生（自動演奏）の停止（終了）を指
示するためのストップスイッチが操作されたか否か判定
する。そのスイッチをユーザが操作した場合、判定はＹ
ＥＳとなり、ステップ８０８に移行して、現在、再生中
の曲データの再生を停止させるための演奏停止処理を実
行した後、ステップ８１２に移行する。そうでない場合
には、判定はＮＯとなってステップ８０９に移行する。
その演奏停止処理を実行した際に、上記変数Ｐｌａｙｆ
ｌｇには曲データを再生中でないことを表す値の０が代
入される。

【００５５】本実施の形態では、上述したように、表示
部１０５で表す時間軸の単位、即ち１演奏画面で表す演
奏時間である表示範囲時間の長さをユーザが変更できる
ようにさせている。ステップ８０９では、操作部１０６
を構成する、その変更を指示するためのスイッチが操作
されたか否か判定する。そのスイッチをユーザが操作し
た場合、判定はＹＥＳとなってステップ８１０に移行
し、ユーザが操作したスイッチの種類に応じて表示範囲
時間を変更する表示時間処理を実行して、変更後の表示
範囲時間を表す値を変数ｔｋＤｉｓｐＲａｎｇｅに代入
した後、ステップ８１２に移行する。そうでない場合に
は、判定はＮＯとなり、ステップ８１１に移行して、操
作部１０６を構成する他のスイッチ、或いは鍵盤１０４
へのユーザの操作に対応するための処理を実行した後、
ステップ８１２に移行する。なお、鍵盤１０４へのユー
ザの操作に応じた楽音の発音（発音開始や消音、更には
各種音響効果の付加など）は、ＣＰＵ１０１が、その鍵
盤１０４から受け取ったデータを用いて音源１０７に送
出すべきコマンドを生成し、それを音源１０７に送出す
ることで実現される。

【００５６】ステップ８１２では、現在、曲データを自
動演奏（再生）中か否か判定する。その自動演奏用に用
意した上記変数Ｐｌａｙｆｌｇに１が代入されていた場
合、判定はＹＥＳとなり、ステップ８１３に移行して、
曲データの自動演奏を進行させるための演奏処理を実行
した後、ステップ８１４に移行する。そうでない場合に
は、判定はＮＯとなってそのステップ８１４に移行す
る。

【００５７】ステップ８１４では、ノートオブジェクト
３２０（図３等参照）、更には他のオブジェクトなどを
曲データの自動演奏の進行に合わせてスクロール表示す
るための楽音表示処理を実行する。続くステップ８１５
では、ユーザに通知すべき他の情報や各種設定内容など
を必要に応じて表示するためのその他の表示処理を実行
する。その次に移行するステップ８１６では、上述した
以外のことに対応するためのその他の処理を実行する。
その実行後に上記ステップ８０２に戻る。特には図示し
ないＭＩＤＩインターフェースを介してのＭＩＤＩデー
タの送受信は、ステップ８１６の処理を実行することで
実現される。

【００５８】このように、電源がオンされている間は、
上記ステップ８０２〜８１６で形成される処理ループを
繰り返し実行するようになっている。それにより、ユー
ザの鍵盤１０４や操作部１０６への操作、曲データの自
動演奏（再生）、更にはその自動演奏の進行に合わせた
スクロール表示に対応するようになっている。

【００５９】以降は、上記全体処理内で実行される各種
サブルーチン処理について詳細に説明する。図９は、上
記ステップ８１３として実行される演奏処理のフローチ
ャートである。全体処理内で実行されるサブルーチン処
理では、始めに図９を参照して、演奏処理について詳細
に説明する。

【００６０】この演奏処理が自動演奏の対象とする曲デ
ータは、図２に示すように、複数のトラックデータから
構成される。このことから、演奏処理は、トラックデー
タ別に、対象とするトラックデータを順次、変更しなが
ら、そのトラックデータ中で処理すべきタイミングとな
ったイベントデータを抽出して処理するようになってい
る。それを実現させるために、１次元の配列変数ｐＰｌ
ａｙＥｖｅｎｔの各要素には、それぞれ対応するトラッ
クデータ中で次に処理すべきイベントデータを示すアド
レス値を保持させている。曲データの自動演奏開始時に
は、それぞれ、対応するトラックデータのなかで先頭に
位置するイベントデータを指定するアドレス値を保持さ
せている。

【００６１】先ず、ステップ９０１では、処理対象とす
るトラックデータを管理するための変数ｔｒｋに０（ト
ラッ番号は０〜１５である）を代入し、現在の演奏時間
（曲データの自動演奏を開始してから経過した時間）を
計算して、それを示す値を変数ｔｋＰｌａｙに代入す
る。続くステップ９０２では、変数ｔｒｋの値が、変数
ＭＡＸＴＲＫに保持されている、トラック番号の最大値
より小さいか否か判定する。本実施の形態では、変数ｔ
ｒｋに代入した０を初期値として、それに代入した値を
随時、インクリメントしながら、変数ｔｒｋの値と番号
が一致するトラックデータを処理していくようになって
いる。このことから、全てのトラックデータを処理対象
としていない場合、判定はＹＥＳとなってステップ９０
３に移行する。そうでない場合には、判定はＮＯとな
り、ここで一連の処理を終了する。なお、上記変数ｔｋ
Ｐｌａｙには、曲データの自動演奏の開始時に０が代入
される。

【００６２】上記したように、ノートイベントデータで
は、そのイベントの内容を表すパラメータデータとし
て、音高データ、ベロシティデータ、及びゲートタイム
データなどがある。時間データに従って発音を開始させ
た楽音は、ゲートタイムデータが表す発音持続時間が経
過した後、消音させなければならない。このことから、
本実施の形態では、２次元の配列変数ｐＰｌａｙＯｆｆ
を用意し、各トラックデータ毎に、発音中の楽音のイベ
ントデータを示すアドレス値を保持させている。その直
後に位置する括弧内の添字はトラックデータ（番号）の
指定用である。その配列変数ｐＰｌａｙＯｆｆによって
提供される作業領域については、以降、オフバッファと
も呼ぶことにする。配列変数ｐＰｌａｙＯｆｆの各要素
には、曲データの自動演奏開始時にＮＵＬＬ（アドレス
値が保持されていないことを示す値である）を代入させ
ている。

【００６３】ステップ９０３では、そのオフバッファに
アドレス値が保持されたイベントデータを処理の対象に
するオフバッファ演奏処理を実行する。次に移行するス
テップ９０４では、配列変数ｐＰｌａｙＥｖｅｎｔのな
かで変数ｔｒｋの値により指定される要素ｐＰｌａｙＥ
ｖｅｎｔ［ｔｒｋ］の値を変数ｐｅに代入する。その後
はステップ９０５に移行する。

【００６４】ステップ９０５では、変数ｐｅの値で指定
されるイベントデータ中の時間データ（図中では「ｐｅ
→ｔｋｔｉｍｅ」と表記）が表す時間が変数ｔｋＰｌａ
ｙの値が表す演奏時間以上か否か判定する。変数ｐｅの
値で指定されるイベントデータが処理すべきタイミング
となった、或いはなっていた場合、その関係を満たすこ
とから、判定はＹＥＳとなってステップ９０７に移行す
る。そうでない場合には、判定はＮＯとなり、ステップ
９０６で変数ｔｒｋの値をインクリメントした後、上記
ステップ９０２に戻る。それにより、対象とするトラッ
クデータを次に代えて、そのステップ９０２以降の処理
を同様に実行する。

【００６５】ステップ９０７では、処理すべきタイミン
グとなったイベントデータを処理することで曲データの
自動演奏を進行させるためのイベント演奏処理を実行す
る。続くステップ９０８では、変数ｐｅに、それまでの
値が示すイベントデータの次に位置しているイベントデ
ータのアドレス値を代入する。その次に移行するステッ
プ９０９では、配列変数ｐＰｌａｙＥｖｅｎｔのなかで
変数ｔｒｋの値により指定される要素ｐＰｌａｙＥｖｅ
ｎｔ［ｔｒｋ］に、変数ｐｅの値を代入する。その後に
上記ステップ９０５に戻る。それにより、変数ｔｒｋの
値で指定されるトラックデータのなかで処理すべきイベ
ントデータを全て処理するまで、ステップ９０５、９０
７〜９０９で形成される処理ループを繰り返し実行す
る。

【００６６】ここで、上記演奏処理内で実行される各種
サブルーチン処理について、図１０、及び図１１を参照
して詳細に説明する。図１０は、上記ステップ９０３と
して実行されるオフバッファ処理のフローチャートであ
る。演奏処理内で実行されるサブルーチン処理では、始
めに図１０を参照して、オフバッファ処理について詳細
に説明する。その演奏処理からは、各種変数の値が渡さ
れる。

【００６７】先ず、ステップ１００１では、変数ｏｆｆ
に０を代入する。その変数ｏｆｆは、その値を用いて指
定される配列変数ｐＰｌａｙＯｆｆ中の要素にアドレス
値が保持されたイベントデータを処理するために用意し
た変数であり、その値は順次、インクリメントされる。

【００６８】ステップ１００１に続くステップ１００２
では、変数ｏｆｆの値が、変数ＭＡＸＯＦＦに保持され
たトラックデータを対象とする最大同時発音数より小さ
いか否か判定する。変数ｏｆｆの値を変更して指定でき
る配列変数ｐＰｌａｙＯｆｆ中の要素を全て指定してい
ない場合、判定はＹＥＳとなってステップ１００３に移
行し、変数ｔｒｋ、及びｏｆｆの各値によって指定され
る配列変数ｐＰｌａｙＯｆｆ中の要素ｐＰｌａｙＯｆｆ
［ｔｒｋ］［ｏｆｆ］に保持されたアドレス値を変数ｐ
ｅに代入した後、ステップ１００４に移行する。そうで
ない場合には、判定はＮＯとなり、配列変数ｐＰｌａｙ
Ｏｆｆ中で変数ｏｆｆの値により指定される要素にアド
レス値が保持されたイベントデータのなかで処理すべき
ものは全て処理したとして、ここで一連の処理を終了す
る。

【００６９】ステップ１００４では、変数ｐｅの値がＮ
ＵＬＬか否か、即ち要素ｐＰｌａｙＯｆｆ［ｔｒｋ］
［ｏｆｆ］にアドレス値が保持されていなかったか否か
判定する。その要素にアドレス値が保持されていなかっ
た場合、判定はＹＥＳとなってステップ１００７に移行
する。そうでない場合には、判定はＮＯとなってステッ
プ１００５に移行する。

【００７０】ステップ１００５では、変数ｐｅの値で指
定されるイベントデータを構成する時間データが示す時
間（図中では「ｐｅ→ｔｋｔｉｍｅ」と表記）に、それ
を構成するゲートタイムデータが示す時間（図中では
「ｐｅ→ｔｋｏｆｆ」と表記）を加算した時間、即ちそ
のイベントデータが表す楽音を消音させるべき時間が、
変数ｔｋＰｌａｙの値が示す演奏時間以上か否か判定す
る。そのイベントデータによって発音を開始させた楽音
を消音させるべきタイミングとなったような場合、判定
はＹＥＳとなってステップ１００６に移行する。そうで
ない場合には、判定はＮＯとなってステップ１００７に
移行する。

【００７１】ステップ１００６では、変数ｐｅの値で指
定されるイベントデータによって発音させた楽音の消音
を音源１０７に指示するとともに、要素ｐＰｌａｙＯｆ
ｆ［ｔｒｋ］［ｏｆｆ］にＮＵＬＬを代入する。続くス
テップ１００７では、変数Ｏｆｆの値をインクリメント
する。その後は上記ステップ１００２に戻る。それによ
り、変数ｏｆｆの値を変更することで指定される配列変
数ｐＰｌａｙＯｆｆ中の要素にアドレス値が保持された
イベントデータのなかで処理すべきイベントデータを全
て処理する。なお、音源１０７に楽音の消音を指示する
コマンドは、イベントデータを構成する音高データを用
いて生成されるものである。

【００７２】次に、図９に示す演奏処理内でステップ９
０７として実行されるイベント演奏処理について、図１
１に示すそのフローチャートを参照して詳細に説明す
る。そのイベント演奏処理は、上述したように、処理す
べきタイミングとなったイベントデータを処理すること
で曲データの自動演奏を進行させるための処理であり、
演奏処理からは、変数ｐｅ、ｔｒｋの値などが渡され
る。

【００７３】先ず、ステップ１１０１では、変数ｐｅの
アドレス値で指定されるイベントデータ中のパラメータ
データが示すイベントの種類がノートイベントか否か判
定する。そのイベントの種類がノートイベントであった
場合、判定はＹＥＳとなってステップ１１０２に移行
し、イベントデータ中の音高データで音高が指定される
楽音の発音を音源１０７に指示するとともに、そのアド
レス値を配列変数ｐＰｌａｙＯｆｆ中の要素に保持させ
た後、一連の処理を終了する。そうでない場合には、判
定はＮＯとなってステップ１１０３に移行する。

【００７４】なお、アドレス値を保持させる要素は、変
数ｔｒｋの値で指定される要素のなかでＮＵＬＬを保持
しているか、或いは対応する楽音の発音を最も早く開始
させたイベントデータのアドレス値を保持している要素
を抽出してそれに決定している。アドレス値を保持させ
ている要素にアドレス値を上書きする場合には、上書き
されるアドレス値で指定されるイベントデータによって
発音中の楽音は消音させる。それにより、ＮＵＬＬを保
持している要素が残っている間はその残っている要素に
アドレス値を保持させ、そのＮＵＬＬを保持している要
素が残っていなければ、上書きされるアドレス値で指定
されるイベントデータによって発音中の楽音を消音させ
て、新たに保持すべきアドレス値を保持させる要素を確
保するようにしている。

【００７５】ステップ１１０３では、変数ｐｅのアドレ
ス値で指定されるイベントデータ中のパラメータデータ
が示すイベントの種類がテンポイベントか否か判定す
る。そのイベントの種類がテンポイベントであった場
合、判定はＹＥＳとなってステップ１１０４に移行し、
変数ｔｋＴｅｍｐｏＣｈａｎｇｅにはイベントデータ中
の時間データ（図中では「ｐｅ→ｔｋｔｉｍｅ」と表
記）、即ちテンポ値を変更するタイミングでの演奏時間
を示す値、変数ｄｗＴｅｍｐｏＣｈａｎｇｅには変数ｄ
ｗＣｌｏｃｋの値、変数ｄｏＴｅｍｐｏにはイベントデ
ータ中のデータが示すテンポ値をそれぞれ代入した後、
一連の処理を終了する。そうでない場合には、判定はＮ
Ｏとなってステップ１１０５に移行し、他のイベントに
対応するための処理を実行した後、一連の処理を終了す
る。

【００７６】上記変数ｄｗＣｌｏｃｋは、例えば一定時
間毎に実行されるタイマインタラプト処理によってイン
クリメントされるカウンタ値を保持させるために用意し
た変数である。そのカウント値によって表される時間
は、テンポ値によって変化する。テンポ値を変更するタ
イミングでのそのカウント値を変数ｄｗＴｅｍｐｏＣｈ
ａｎｇｅに保持させるのは、その変化に対応できるよう
にするためである。曲データの自動演奏開始時には、変
数ｔｋＴｅｍｐｏＣｈａｎｇｅには０、変数ｄｗテンポ
Ｃｈａｎｇｅには変数ｄｗＣｌｏｃｋの値、変数ｄｏＴ
ｅｍｐｏには所定の初期値がそれぞれ代入される。この
ことから、図９に示す演奏処理（より具体的にはステッ
プ９０１の処理）の実行時に計算される演奏時間は、そ
の計算に用いる値を変数のシンボルで表現すれば、ｔｋ
Ｐｌａｙ＝ｔｋＴｅｍｐｏＣｈａｎｇｅ＋（ｄｗＣｌｏ
ｃｋ−ｄｗＴｅｍｐｏＣｈａｎｇｅ）×ｄｏＴｅｍｐｏ
により算出している。

【００７７】図８に示す全体処理内で実行されるサブル
ーチン処理の説明に戻る。図１２は、その全体処理内で
ステップ８１４として実行される楽音表示処理のフロー
チャートである。次に図１２を参照して、楽音表示処理
について詳細に説明する。図３〜図５を参照して説明し
た各種オブジェクトの表示やスクロールは、その楽音表
示処理を実行することで行われる。

【００７８】先ず、ステップ１２０１では、現在、曲デ
ータ（図２参照）を自動演奏中か否か判定する。それが
自動演奏中であることを示す値の１が変数Ｐｌａｙｆｌ
ｇに代入されていた場合、判定はＹＥＳとなり、ステッ
プ１２０２で変数ｔｋＰｌａｙの値を変数ｔｋＤｉｓｐ
に代入した後、ステップ１２０３に移行する。そうでな
い場合には、判定はＮＯとなり、ここで一連の処理を終
了する。

【００７９】上記ｔｋＤｉｓｐには、表示部１０５での
スクロール表示における先頭の演奏時間を保持させるよ
うになっている。その演奏時間として変数ｔｋＰｌａｙ
に保持された値を代入することから明らかなように、本
実施の形態では、現在の演奏時間（曲データの自動演奏
を開始してから経過した時間）をスクロール表示の範囲
の先頭とさせている。それにより、例えばノートオブジ
ェクト３２０が表す楽音の発音を開始させるべきタイミ
ングは、そのオブジェクト３２０の先端を表示鍵盤３０
１の端にまで移動させることで表現し、その楽音を消音
させるべきタイミングは、そのオブジェクト３２０の後
端まで全て消去させることで表現するようにしている。
当然のことながら、それとは別の形でスクロール表示を
行うようにしても良い。

【００８０】ステップ１２０３では、変数ｔｋＤｉｓｐ
の値が変数ｔｋＤｉｓｐＯｌｄの値より小さいか否か判
定する。その変数ｔｋＤｉｓｐＯｌｄには、後述するス
テップ１２０８で変数ｔｋＤｉｓｐの値を代入してその
値を更新するようになっている。変数ｔｋＤｉｓｐに値
を代入する変数ｔｋＰｌａｙには、曲データの演奏開始
時に０が代入される。このことから、曲データの自動演
奏開始後、初めてステップ１２０３を実行した場合、変
数ｔｋＰｌａｙには変数ｔｋＤｉｓｐＯｌｄの値よりも
小さい値が代入されていることから、判定はＹＥＳとな
ってステップ１２０４に移行する。そうでない場合に
は、判定はＮＯとなってステップ１２０５に移行する。

【００８１】ステップ１２０４では、１次元の配列変数
ｐＤｉｓｐＥｖｅｎｔの各要素（トラック番号は０〜１
５の何れかであることから、それに合わせて要素の数は
１６としている）に、それぞれが曲データを構成する各
トラックデータの先頭に位置するイベントデータのアド
レス値を保持している配列変数ｐＴｒｋの各要素の値を
対応させて代入する。表示中のノートオブジェクト３２
０が表すイベントデータのアドレス値の保持用に用意し
た２次元の配列変数ｐＤｉｓｐＯｆｆの各要素には、そ
れぞれＮＵＬＬを代入する。そのようにしてスクロール
表示を行ううえでの初期設定を行った後にステップ１２
０５に移行する。なお、配列変数ｐＤｉｓｐＯｆｆによ
って提供される作業領域については、以降、表示オフバ
ッファとステップ１２０５では、スクロール表示の対象
とならない各オブジェクト、例えば表示鍵盤３０１や実
ノートオブジェクト３０２を表示部１０５に表示させる
処理を実行する。そのオブジェクト３０２の表示位置
（表示鍵盤３０１で表示色を他と異ならせる鍵）やＹ軸
上の幅（高さ）は、図８に示すステップ８１１の処理の
実行時に鍵盤１０４から受け取ったデータから決定す
る。

【００８２】ステップ１２０５に続くステップ１２０６
では、ノートイベントを表すノートオブジェクト３２０
を表示させるためのイベント表示処理を実行する。その
次に移行するステップ１２０７では、配列変数ｐＤｉｓ
ｐＯｆｆによって提供される表示オフバッファに格納さ
せるイベントデータのアドレス値を管理し、既に処理す
べきタイミングが来たイベントデータを示すノートオブ
ジェクト３２０を対象にスクロール表示させるための表
示オフバッファ処理を実行する。それを実行した後にス
テップ１２０８に移行する。

【００８３】１演奏画面（スクロール表示を行う表示領
域）を表示させるうえで必要な３次元空間データは、上
記ステップ１２０６、１２０７の各処理を実行すること
により生成される。このことから、ステップ１２０８で
は、変数ｔｋＤｉｓｐＯｌｄに変数ｔｋＤｉｓｐの値を
代入する一方、その時点で生成されている３次元空間デ
ータから２次元平面データを生成する変換を行い、その
平面データから１演奏画面分、或いはその一部分の画像
データを生成し、それを表示部１０５に送出してその表
示内容を更新させる。一連の処理はその後に終了する。

【００８４】上記楽音表示処理を実行することにより、
図３に示すように行うスクロール表示が実現される。以
降、その楽音表示処理内で実行される各種サブルーチン
処理について、図１３、図１４を参照して詳細に説明す
る。

【００８５】図１３は、上記ステップ１２０６として実
行されるイベント表示処理のフローチャートである。楽
音表示処理内で実行されるサブルーチン処理では、始め
に図１３を参照して、イベント表示処理について詳細に
説明する。本実施の形態では、トラック番号が０、１で
ある左手演奏用、及び右手演奏用のトラックデータを構
成するイベントデータのみを対象にして、ノートオブジ
ェクト３２０のスクロール表示を行うようにしている。

【００８６】先ず、ステップ１３０１では、変数ｔｒｋ
に、変数ＬＥＦＴＴＲＫに保持されているトラック番号
（ここでは０である）を代入する。続くステップ１３０
２では、変数ｔｒｋの値が、変数ＲＩＧＨＴＴＲＫに保
持されているトラック番号（ここでは１である）以下か
否か判定する。変数ｔｒｋの値は順次、インクリメント
することで、処理の対象とするトラックデータを切り換
えるようになっている。このことから、右手演奏用のト
ラックデータを対象にした処理が完了していた場合、判
定はＮＯとなり、ここで一連の処理を終了する。そうで
ない場合には、判定はＹＥＳとなってステップ１３０３
に移行する。

【００８７】ステップ１３０３では、変数ｐｅに、配列
変数ｐＤｉｓｐＥｖｅｎｔ中で変数ｔｒｋの値により指
定される要素ｐＤｉｓｐＥｖｅｎｔ［ｔｒｋ］のアドレ
ス値を代入する。次に移行するステップ１３０４では、
変数ｐｅの値で指定されるイベントデータ中の時間デー
タが示す時間の長さが、変数ｔｋＤｉｓｐの値が示す現
在の演奏時間の長さ以下か否か判定する。変数ｐｅの値
で指定されるイベントデータを処理すべきタイミングが
来たような場合、判定はＹＥＳとなってステップ１０５
に移行する。そうでない場合には、判定はＮＯとなって
ステップ１３１０に移行する。

【００８８】ステップ１３０５では、変数ｐｅの値で指
定されるイベントデータ中のデータが示すイベントの種
類（タイプ）がノートイベントか否か判定する。そのイ
ベントの種類がノートイベントであった場合、判定はＹ
ＥＳとなってステップ１３０６に移行する。そうでない
場合には、判定はＮＯとなってステップ１３０８に移行
する。

【００８９】ステップ１３０６では、イベントデータ中
の時間データ、音高データ、ゲートタイムデータ、及び
ベロシティデータから、上述したようにしてそのイベン
トデータを表すノートオブジェクト３２０の形状、及び
その表示位置（各点のＸＹＺ軸上の各座標値）を決定す
ることにより、そのノートオブジェクト３２０の３次元
空間データを生成する。また、その音高データや変数ｔ
ｒｋの値から、オブジェクト３２０の前部３２０ａ、後
部３２０ｂの表示色を決定する（図４参照）。そのよう
にしてスクロールさせるノートオブジェクト３２０を表
示させるためのデータを生成した後は、ステップ１３０
７に移行して、そのイベントデータのアドレス値を、配
列変数ｐＤｉｓｐＯｆｆの変数ｔｒｋで指定される要素
ｐＤｉｓｐＯｆｆ［ｔｒｋ］［］（「［］」は２番目の
添字は予め予想できない値であることを表す。以降、特
に断らない限り、同様の意味で用いる）に保持させる。
その後にステップ１３０８に移行する。ここでアドレス
値を保持させる要素は、図１１に示すイベント演奏処理
内で実行されるステップ１１０２の処理と同様に、ＮＵ
ＬＬを保持しているか、或いは発音開始時刻が最も早い
楽音を表すイベントデータのアドレス値を保持している
ものである。

【００９０】ステップ１３０８では、変数ｐｅに、それ
までの値で指定されるイベントデータの次に位置するイ
ベントデータのアドレス値を代入する。その次に移行す
るステップ１３０９では、要素ｐＤｉｓｐＥｖｅｎｔ
［ｔｒｋ］に、変数ｐｅの値を代入する。その後は上記
ステップ１３０４に戻る。

【００９１】そのステップ１３０４の判定がＮＯとなっ
て移行するステップ１３１０では、変数ｐｅの値で指定
されるイベントデータ中の時間データが示す時間（図
中、「ｐｅ→ｔｋｔｉｍｅ」と表記）が、表示終了時間
（図中、「ｔｋＤｉｓｐ＋ｔｋＤｉｓｐＲａｎｇｅ」と
表記）よりも前か（短いか）否か判定する。そのイベン
トデータを処理すべきタイミングが表示終了時間以後で
あった場合、判定はＮＯとなり、ステップ１３１１で変
数ｔｒｋの値をインクリメントした後、上記ステップ１
３０２に戻る。それにより、現在、トラック番号０のト
ラックデータを処理対象としていたのであれば、トラッ
ク番号１のトラックデータに処理対象を移行させる。一
方、そうでない場合には、判定はＹＥＳとなってステッ
プ１３１２に移行する。

【００９２】ステップ１３１２では、変数ｐｅの値で指
定されるイベントデータ中のデータが表すイベントの種
類がノートイベントか否か判定する。そのイベントの種
類がノートイベントであった場合、判定はＹＥＳとなっ
てステップ１３１３に移行する。そうでない場合には、
判定はＮＯとなってステップ１３１４に移行する。

【００９３】ステップ１３１３では、処理すべきタイミ
ングが来ていないイベントデータを対象に、上記ステッ
プ１３０６の処理と同様にして、そのイベントデータを
表すノートオブジェクト３２０表示用の３次元空間デー
タを少なくとも生成する。その３次元空間データは、発
音を終了させるべきタイミングが表示終了時間よりも後
となっている場合、その表示終了時間の位置で前部３２
０ａ、或いは後部３２０ｂをＸＹ平面で切断させるか、
或いは、図５中のｚ１、或いはｚ２が表す時間（Ｚ軸上
の座標値）をその表示終了時間と一致させる形で生成す
る。その次に移行するステップ１３１４では、変数ｐｅ
に、それまでの値で指定されるイベントデータの次に位
置するイベントデータのアドレス値を代入する。その後
は上記ステップ１３０４に戻る。

【００９４】このようにして、イベント表示処理では、
処理すべきタイミングが現在の演奏時間から表示終了時
間までの間となっているイベントデータ（イベントの種
類として対象となるのはノートイベントのみである）の
ノートオブジェクト３２０の表示、及びスクロールを行
うようにしている。

【００９５】図１４は、図１２に示す楽音表示処理内で
ステップ１２０７として実行される表示オフバッファ処
理のフローチャートである。最後に図１４を参照して、
その表示オフバッファ処理について詳細に説明する。

【００９６】この表示オフバッファ処理では、配列変数
ｐＤｉｓｐＯｆｆの要素にアドレス値が保持されたイベ
ントデータ（イベントの種類はノートイベントのみであ
る）のみを処理対象にしている。それにより、処理すべ
きタイミングが来たイベントデータのノートオブジェク
ト３２０のスクロール表示は表示オフバッファ処理を実
行することで対応するようになっている。

【００９７】先ず、ステップ１４０１では、変数ｔｒｋ
に、変数ＬＥＦＴＴＲＫに保持されているトラック番号
（ここでは０である）を代入する。続くステップ１４０
２では、変数ｔｒｋの値が、変数ＲＩＧＨＴＴＲＫに保
持されているトラック番号（ここでは１である）以下か
否か判定する。変数ｔｒｋの値は順次、インクリメント
することで、処理の対象とするトラックデータを切り換
えるようになっている。このことから、右手演奏用のト
ラックデータを対象にした処理が完了していた場合、判
定はＮＯとなり、ここで一連の処理を終了する。そうで
ない場合には、判定はＹＥＳとなってステップ１４０３
に移行する。

【００９８】ステップ１４０３では、変数ｏｆｆに０を
代入する。次に移行するステップ１４０４では、変数ｔ
ｒｋ、ｏｆｆの各値で指定される要素ｐＤｉｓｐＯｆｆ
［ｔｒｋ］［ｏｆｆ］に保持された値を変数ｐｅに代入
する。その後に移行するステップ１４０５では、変数ｐ
ｅの値がＮＵＬＬ（アドレス値ではない値）か否か判定
する。要素ｐＤｉｓｐＯｆｆ［ｔｒｋ］［ｏｆｆ］にＮ
ＵＬＬが保持されていた場合、判定はＹＥＳとなってス
テップ１４１０に移行する。そうでない場合には、判定
はＮＯとなってステップ１４０６に移行する。

【００９９】ステップ１４０６では、変数ｐｅの値で指
定されるイベントデータ中の時間データが示す時間にそ
のイベントデータ中のゲートタイムデータが示す発音持
続時間を足した時間（発音終了時間）が、変数ｔｋＤｉ
ｓｐの値が示す現在の演奏時間より前か（短いか）否か
判定する。その発音終了時間が現在の演奏時間よりも前
であった場合、判定はＹＥＳとなり、ステップ１４０７
で要素ｐＤｉｓｐＯｆｆ［ｔｒｋ］［ｏｆｆ］にＮＵＬ
Ｌを保持させた後、ステップ１４１０に移行する。そう
でない場合には、即ち変数ｐｅの値で指定されるイベン
トデータの発音オブジェクト３０２を全て消去させる必
要がない場合には、判定はＮＯとなってステップ１４０
８に移行する。

【０１００】ステップ１４０８では、変数ｐｅの値で指
定されるイベントデータ中の時間データが示す時間が表
示終了時間よりも前か（短いか）否か判定する。そのイ
ベントデータの発音オブジェクト３０２の表示を開始す
べきタイミングが来ていないような場合、その条件は満
たされないことから、判定はＮＯとなってステップ１４
１０に移行する。そうでない場合には、判定はＹＥＳと
なってステップ１４０９に移行する。

【０１０１】ステップ１４０９では、そのイベントデー
タ中の時間データ、音高データ、ゲートタイムデータ、
及びベロシティデータから、そのイベントデータを表す
ノートオブジェクト３２０表示用の３次元空間データを
少なくとも生成する。このときには、ノートオブジェク
ト３２０の全てを表示させないのであれば、３次元空間
データは、現在の演奏時間の位置でノートオブジェクト
３２０をＸＹ平面で切断させる形で生成する。それに続
くステップ１４１０では、変数ｏｆｆの値をインクリメ
ントする。その後はステップ１４１１に移行する。

【０１０２】ステップ１４１１では、変数ｏｆｆの値が
変数ＭＡＸＯＦＦに保持されたトラックデータを対象と
する最大同時発音数より小さいか否か判定する。変数ｏ
ｆｆの値は０を初期値として順次インクリメントする。
このことから、配列変数ｐＤｉｓｐｏｆｆの要素に保持
されたトラック番号が変数ｔｒｋの値と一致するトラッ
クデータ中のイベントデータを示すアドレス値を全て読
み出して処理を行った場合、判定はＮＯとなり、ステッ
プ１４１２で変数ｔｒｋの値をインクリメントした後、
上記ステップ１４０２に戻る。それにより、処理対象と
するトラックデータの切替を行う。一方、そうでない場
合には、判定はＮＯとなって上記ステップ１４０４に戻
る。それにより、値を読み出すべき要素を変更して、そ
れ以降の処理を同様に実行する。

【０１０３】なお、本実施の形態では、スクロール面３
１０の垂線に対して交差する方向を視点とすることで、
ユーザに与える違和感を低減させているが、視認性の低
下や強調の度合いなどが低下しても、それを低減させる
効果はノートオブジェクト３２０を３次元（立体）的に
表示させなくても得られることから、ノートオブジェク
ト３２０を２次元の図形で表示できるようにしても良
い。そのようにした場合には、音階軸上の幅で楽音のベ
ロシティ値を表すようにしても良い。

【０１０４】また、イベントについては、１つの曲デー
タ（図２参照）中で表されているものだけを表示させて
いるが、複数の曲データ中で表されているものを並行し
て同時に表示させるようにしても良い。例えばユーザが
行った演奏を曲データの形で保存して、その曲データ中
で表されているイベントを単独、或いは他の曲データ中
で表されているイベントと合わせて表示できるようにし
ても良い。処理対象とする曲データが複数となっても、
各曲データを対象として行う処理内容自体は処理対象と
する曲データが１つの場合と基本的には同じであること
から、詳細な説明は省略する。

【０１０５】本実施の形態は、電子楽器に搭載されたに
よる演奏情報表示装置に本発明を適用したものである。
しかし、本発明を適用できる演奏情報表示装置は、電子
楽器などに搭載されたものに限定されるわけではない。
本発明は、他の装置に搭載されていない専用の演奏情報
表示装置を含めて幅広く適用できるものである。表示部
１０５についても、外部の表示装置と接続できるのであ
れば無くても良い。

【０１０６】上記演奏情報表示装置の動作を実現させる
ようなプログラムは、ＣＤ−ＲＯＭ、ＤＶＤ、或いは光
磁気ディスク等の記録媒体に記録させて配布しても良
い。或いは、公衆網等で用いられる伝送媒体を介して、
そのプログラムの一部、若しくは全部を配信するように
しても良い。そのようにした場合には、ユーザはプログ
ラムを取得して任意の演奏情報表示装置、或いはコンピ
ュータ等のデータ処理装置にロードすることにより、そ
の装置に本発明を適用させることができる。このことか
ら、記録媒体は、プログラムを配信する装置がアクセス
できるものであっても良い。

【０１０７】

【発明の効果】以上、説明したように本発明は、楽音の
発音持続時間を含む複数の演奏情報を基に、表示すべき
オブジェクトの形状を決定し、その決定した形状でオブ
ジェクトをスクロール表示させる。このため、そのよう
にして表示させたオブジェクトを通して、発音させるべ
き楽音の音高やその発音期間以外の演奏情報をユーザに
提示することができる。

【０１０８】本発明は、楽音の発音持続時間を少なくと
も表現するオブジェクトを３次元（立体）的に表示させ
てスクロールさせる。３次元的に表示させたオブジェク
トは、２次元的に表示させたオブジェクトと比較して、
オブジェクト自体が持つ情報量が多くなって目立つよう
になるだけでなく、その形状を利用したオブジェクトの
表示のさせかたも行えるようになる。このため、ユーザ
に注目させるべき度合いが高いオブジェクトの視認性の
向上や強調を行うことができる。それにより、ユーザが
より迅速、且つ容易に把握できるように演奏情報を提示
することができる。

【図面の簡単な説明】

【図１】本実施の形態による演奏情報表示装置を搭載し
た電子楽器の回路構成図である。

【図２】曲データの構成を説明する図である。

【図３】スクロール表示方法を説明する図である。

【図４】ノートオブジェクトの表示形態を説明する図で
ある。

【図５】ノートオブジェクトの形状を説明する図であ
る。

【図６】他のスクロール表示方法を示す図である。

【図７】ノートオブジェクトの変形例を示す図である。

【図８】全体処理のフローチャートである。

【図９】演奏処理のフローチャートである。

【図１０】オフバッファ演奏処理のフローチャートであ
る。

【図１１】イベント演奏処理のフローチャートである。

【図１２】楽音表示処理のフローチャートである。

【図１３】イベント表示処理のフローチャートである。

【図１４】表示オフバッファ処理のフローチャートであ
る。

【符号の説明】

１０１ＣＰＵ１０２ＲＯＭ１０３ＲＡＭ１０４鍵盤１０５表示部１０６操作部１０７音源１０８サウンドシステム３０１表示鍵盤３０２実ノートオブジェクト３１０スクロール面３１１小節線３１２線３２０ノートオブジェクト３２０ａ前部３２０ｂ後部

Claims

【特許請求の範囲】

【請求項１】演奏情報をスクロール表示によりユーザ
に提示する演奏情報表示装置において、発音させるべき楽音の音高、該音高の楽音の発音開始タ
イミング、及び該楽音の発音持続時間を該楽音単位で表
す曲データを取得する曲データ取得手段と、前記曲データ取得手段が取得した曲データ中で表されて
いる楽音に関する該楽音の発音持続時間を含む複数の演
奏情報の各内容に基づく形状のオブジェクトを表示装置
上にスクロール表示させる演奏情報表示手段と、を具備することを特徴とする演奏情報表示装置。
【請求項２】前記演奏情報表示手段は、前記オブジェ
クトを３次元的に表示させて、該オブジェクトの形状で
前記複数の演奏情報を表現させる、ことを特徴とする請求項１記載の演奏情報表示装置。
【請求項３】前記演奏情報表示手段は、前記オブジェ
クトにおいて、前記発音持続時間を長さで表す方向の交
差方向上の長さで前記楽音を発音させるべき音量を前記
複数の演奏情報の一つとして表現させる、ことを特徴とする請求項２記載の演奏情報表示装置。
【請求項４】前記演奏情報表示手段は、前記オブジェ
クトを配置する仮想的平面の垂線に対する交差方向を視
点にして、該オブジェクトを表示させる、ことを特徴とする請求項１、２、または３記載の演奏情
報表示装置。
【請求項５】前記演奏情報表示手段は、前記楽音の音
高が鍵盤の黒鍵に対応するか否かに応じて、前記オブジ
ェクトの表示形態を変更させる、ことを特徴とする請求項１〜４の何れか１項に記載の演
奏情報表示装置。
【請求項６】演奏情報をスクロール表示によりユーザ
に提示する演奏情報表示装置において、発音させるべき楽音の音高、該音高の楽音の発音開始タ
イミング、及び該楽音の発音持続時間を該楽音単位で表
す曲データを取得する曲データ取得手段と、前記曲データ取得手段が取得した曲データ中で表されて
いる楽音の発音持続時間を少なくとも表現するオブジェ
クトを３次元的に表示装置上に表示させてスクロール表
示させる演奏情報表示手段と、を具備することを特徴とする演奏情報表示装置。
【請求項７】演奏情報をスクロール表示によりユーザ
に提示する演奏情報表示装置に実行させるプログラムで
あって、発音させるべき楽音の音高、該音高の楽音の発音開始タ
イミング、及び該楽音の発音持続時間を該楽音単位で表
す曲データを取得する機能と、前記取得する機能により取得した曲データ中で表されて
いる楽音に関する該楽音の発音持続時間を含む複数の演
奏情報の各内容に基づく形状のオブジェクトを表示装置
上にスクロール表示させる機能と、を実現させるためのプログラム。
【請求項８】演奏情報をスクロール表示によりユーザ
に提示する演奏情報表示装置に実行させるプログラムで
あって、発音させるべき楽音の音高、該音高の楽音の発音開始タ
イミング、及び該楽音の発音持続時間を該楽音単位で表
す曲データを取得する機能と、前記取得する機能により取得した曲データ中で表されて
いる楽音の発音持続時間を少なくとも表現するオブジェ
クトを３次元的に表示装置上に表示させてスクロール表
示させる機能と、を実現させるためのプログラム。