(57)【要約】【課題】  電子機器を用いて人体の動作の変移の記録、解析、表示を行う。【解決手段】  制作者の指示に従い読取または録画により入力した人体の動作のデータを基礎データとして定義しＳ８、基礎データに対し特徴点の位置を設定しＳ１０、基礎データを解析してＳ１２節目となる動作を定義してＳ１４静止画像または映像のデータを生成しＳ１６、生成されたデータを手本データとして定義してＳ１８データ記録手段に記録しＳ２０、別途読み込みＳ２２定義しＳ２４データ記録手段に記録したＳ２６各種データとともに、データ制御手段が発行しデータ再生命令Ｓ２８に従い電子機器の画面上で表示および再生を行うＳ３０装置または方法。【選択図】図２
2013146511.tif 000002
【特許請求の範囲】
【請求項１】
電子機器を用いて人体の動作の変移を記録、解析し、表示する方法であって、
人間が人体の動作を実演する状況を録画し、または人体の動作が記録された映像データを読み込み、基礎データとして定義するステップと、
制作者の指示に従い、前記基礎データにおける人体に対する特徴点の設定を受け入れるステップと、
前記特徴点の設定情報に基づき前記基礎データにおける人体の動きを解析し、「節目」となる動作を定義するステップと、
節目となる動作として定義された人体の動作から静止画像データまたは映像データを生成するステップを含む方法。
【請求項２】
「手本データ」として節目となる人体の動作が記録された静止画像データまたは映像データ（請求項１により生成された静止画像データまたは映像データを含みこれに限らない）を、「予告データ」として制作者が指定した静止画像データや映像データ（請求項１で生成されたデータを含みこれに限らない）のいずれかまたは複数を、「サインデータ」として制作者の指定した静止画像データを、また「シーケンスデータ」としてこれらの静止画像データおよび映像データの表示方法を制作者の指定に基づき定義し、データ記録手段に記録するステップと、
前記手本データ、予告データ、およびサインデータの静止画像および映像のいずれかまたは複数を画像データ記録手段から読み出すステップと、
前記手本データ、予告データ、およびサインデータの静止画像および映像のいずれかまたは複数を、シーケンスデータの内容に従って制御して電子機器の画面に表示していくステップと
をさらに含む請求項１に記載の方法。
【請求項３】
制作者の指示があった場合、「付属データ」として制作者の指定した画像データおよび文字データを記録し、シーケンスデータの内容に従って前記手本データ、予告データ、およびサインデータとともに付属データを電子機器の画面に表示するステップと
をさらに含む請求項１に記載の方法。
【請求項４】
ユーザーの指示があった場合、前記予告データの静止画像や映像の大きさや色彩をあらかじめ設定されていた内容に変更して電子機器に表示するステップと
をさらに含む請求項１に記載の方法。
【請求項５】
ユーザーの指示があった場合、指示を受け入れて請求項２および請求項３による静止画像や映像の表示をあらかじめ設定された方法（スロー再生、コマ送り、左右反転、特定範囲のみの再生、リピート再生など）で行うステップと
をさらに含む請求項１に記載の方法。
【請求項６】
電子機器を用いて人体の動作の変移を記録、解析し、表示する装置であって、請求項１から請求項５までに記載されたステップを手段として含む装置。
【発明の詳細な説明】
【技術分野】
【技術分野】
【０００１】  本発明は、電子機器において人体の動作の変移を記録・解析し、画面上に表示する装置、方法およびそのプログラムに関する。
【背景技術】
【０００２】  ダンスの振り付けなど人体の動作の変移を解説する手段として、テレビやコンピュータを用いて画面に当該人体の動作を静止画像と映像のいずれかまたは両方によって表示する方法（以下「映像方式」という）や、紙面等に動作の節目となるポーズの形態を実写やイラスト等（複数の方法を組み合わせたものを含む）によって表示する方法（以下「静止画像方式」という）がある【０００３】  前記映像方式の場合は、次の動作への切り替えが頻繁に行われる場合（例えばダンスのように歌唱や踊りを所定のリズムで実演される動作）、ビデオデッキやコンピュータプログラムの備えている機能である、静止画像と映像のいずれかまたは両方の再生速度を落としたりコマ送りをしたりする機能を用いて表示する方法もある。
【発明の概要】
【発明が解決しようとする課題】
【０００４】  まず、そもそも人体の動作を理解するうえで重要となるのは動作の節目となる一部の動きであり、表示される動作の大半はあくまで人体の動作の節目となる動き同士をつなぐものであるから、これは節目となる動きと比較して人体の動作を理解する上での重要性が低いといえる。節目となる動きを識別することなく単純に動作すべてを静止画像や映像のいずれかまたは両方で表示したのでは、ユーザーが都度自らの感覚で節目となる動きを見分けた上で動作を理解しなければならず、理解の効率化の妨げとなる点が、映像方式において課題となっている。【０００５】  また、節目となる動きが抽出された静止画像や映像のいずれかまたは両方を表示しようとすれば、制作者は人体の動作の中からから節目となる動きを識別していく作業をおこなわなければならず、そのための時間、費用、および労力が必要となってしまう。さらに、節目となる動きを実演やイラスト等（複数の方法の組み合わせを含む）でひとつひとつ再現しようとすれば、その制作のための時間、費用、および労力も別途必要になってしまう。この点は映像方式、静止画像方式の両方で課題となっている。【０００６】  さらに、たとえばダンスのように所定のリズムにおける特定のタイミングで動作を行うことが求められる人体の動作を表示する場合においては、その動作の変移を本来のリズムに合わせて表示できなければ、ユーザーは別途動作の本来のリズムを理解するための学習をしなければならないため、学習に二重の労力や時間を強いられる。この点は映像方式において人体の動作の静止画像や映像をスロー再生やコマ送りで再生した場合および静止画像方式の両方で課題となっている。
本発明は映像方式および静止画像方式の長所を組み合わせた表現を可能にすることで、ユーザーがより効率的に人体の動作を理解できる表現をより少ない時間、費用、および労力で制作可能にし、かかる課題を解決するためのものである。
【課題を解決するための手段】
【０００７】  本発明においては、人体の動作を録画した情報または人体の動作を記録した情報を基礎データとして取り込み節目となる動きを解析する方法、および人体の動作の変移および次の動作に移行すべきタイミングを同時に確認することができる静止画像または映像の表示装置および表示方法が提供される。【０００９】  すなわち、本発明では人体の動作の情報を取り込み解析して電子機器の画面上に表示する方法であって、人間が人体の動作を実演する状況を記録しまたは人体の動作が記録された静止画像データや映像データを読み込み、「基礎データ」として設定するステップと、前記基礎データにおける人体の動きを解析し「節目」となる動作を定義するステップと、節目となる動作として定義された人体の動作から画像データまたは映像データを生成するステップと、「手本データ」として節目となる人体の動作が記録された静止画像データまたは映像データ（基礎データを解析して生成されたデータを含みこれに限らない）を、「予告データ」として制作者が指定した静止画像データや映像データ（基礎データを解析して生成されたデータを含みこれに限らない）のいずれかまたは複数を、「サインデータ」として制作者の指定した静止画像データを、また「シーケンスデータ」としてこれらの静止画像データおよび映像データの表示方法を制作者の指定に基づき定義し、データ記録手段に記録するステップと、前記手本データ、予告データ、およびサインデータの静止画像および映像のいずれかまたは複数を画像データ記録手段から読み出すステップと、前記手本データ、予告データ、およびサインデータの静止画像および映像のいずれかまたは複数を、シーケンスデータの内容に従って制御して電子機器の画面に表示していくステップとを含み、前記電子機器の画面に表示するステップは、制作者の指示があった場合に、「付属データ」として制作者の指定した画像データおよび文字データを記録しシーケンスデータの内容に従って前記手本データ、予告データ、およびサインデータとともに電子機器の画面に表示するステップと、ユーザーの指示があった場合に、シーケンスデータの内容に従って前記予告データの画像や映像の大きさや色彩をあらかじめ設定されていた内容に変更して電子機器に表示するステップ、および画像や映像の表示をあらかじめ設定された方法（スロー再生、コマ送り、左右反転、特定範囲のみの再生、リピート再生など）で行うステップを含む方法、または本発明では人体の動作の情報を取り込み解析して電子機器の画面上に表示する装置であって上記の各ステップを手段として含む装置が提供される。【００１０】  本発明が提供される電子機器は単一の機器で構成される必要は無く、有線または無線により他の電子機器と情報をやりとりできる機能を備えた複数の電子機器の集合であってもよい。【００１１】  本発明は静止画像および映像を記録、読込み、解析して、再生する機能をもつ電子機器に提供される。【００１２】  本発明が使用する記録装置は例えば光学装置を備えたビデオカメラなどが典型であるが、これに限定されない。【００１３】  本発明が使用する読取装置は例えばメモリーカード等のカードリーダーやハードディスク等を接続できる端子を備えたデータ記録媒体との接続装置などが典型であるが、これに限定されない。【００１４】  本発明が使用する表示装置は例えば液晶表示装置などが典型であるが、これに限定されない。【００１５】  本発明が使用する画像データは、例えば、ビットマップ、ＪＰＥＧ、ＪＰＥＧ２０００、ＧＩＦ、ＴＩＦＦ等任意のデータ形式や、その他の独自のデータ形式である電子的な画像である。【００１６】  本発明が使用する映像データは、例えば、ＭＰＥＧ２、ＦＬＶ、ＡＶＣＨＤ等の任意のデータ形式や、その他の独自のデータ形式である電子的な映像である。【００１７】  本発明が使用する音声データは、例えば、ＭＰ３、ＷＡＶＥ、ＡＡＣ等の任意のデータ形式や、その他の独自のデータ形式である電子的な音声である。【００１８】  基礎データとすることができる情報は、一般的な映像データでも、３次元空間における人体の動作をシミュレートしたデータでも、人体の動作を撮影した静止画像の集合でもよい。【００１９】  電子機器は、電子機器の前で実演された人体の動作を記録装置によって録画して基礎データとすることができる。【００２０】  基礎データの解析にあたっては、制作者の指示に従って、基礎データ上で動作を実演している人体の静止画像に複数の特徴点を設定する。特徴点の位置は制作者が任意に設定していくが、人体は関節を基軸として動作することから、人体の関節にあたる位置を特徴点として設定することが基本となる。【００２１】  電子機器は、人体に設定された特徴点の指定を受け入れた後、各特徴点の周辺部分における静止画像の色調や形状を記録し、基礎データ全体において当該色調および形状と一致または類似する画像が存在する位置の変移をもって各特徴点の位置の変移を識別する。【００２２】  基礎データの解析は、基礎データ上で表現されている人体の動作における各特徴点の座標の移動の変移の過程をもとに節目となる動きの位置を識別することで行う。たとえば、特徴点の多くが一定時間ほぼ動かなかった場合、移動方向が大きく変化した特徴点が現れた場合、移動方向のベクトルが大きく切り替わった場合、特徴点の位置関係があらかじめ登録された情報に近似した場合等には、電子機器がその瞬間の人体の動作を実演している人体の静止画像または映像が節目として識別される。また、基礎データの解析にあたっては、人体の特定部分を拡大して解析することで、手の関節などの細かい動きをより正確に節目として識別することができる。識別結果は制作者からの直接の指示によって修正することもできる。【００２３】  特徴点の座標位置は直行座標系により指定される。座標軸の数は制作者の指示により任意に設定することができ、二次元座標によるものでも三次元座標によるものでもよい。【００２４】  基礎データから定義された前記節目には、個々の特徴点の座標位置の情報に加え、全体の動作が開始された時点から当該節目の動作が行われた時点までの経過時間の情報が付加され、当該基礎データにおける他の節目に付加された情報と合わせて一つの情報として映像データ（静止画像の連続体を含む）が生成される。【００２５】  前記映像データには、音声、音楽等のデータを「音声データ」として添付することができる。また、画像、映像、および歌詞、コメント等の文字のデータを「付属データ」として添付することもできる（音声データおよび付属データのファイルは映像データの内部に包含されていても独立したファイルとして存在していても良い）。これらの情報にも前記節目と同様に経過時間の情報を付加することができる。これは、これらのデータを電子機器上で表示および再生するタイミングを同期させるための工夫である。【００２６】  本発明は人体の動作の変移を表現した静止画像または映像（前記映像データおよび付属データを含み、これに限られない）を電子機器上に表示し、ユーザーに閲覧させることができる。【００２７】  前記静止画像または映像を表示する際は、その全部または一部に対し制作者の意図するタイミングで音声データを再生することができる。【００２８】  データ記録手段は何らかの不揮発性記録装置に格納された、静止画像および映像の表示のための情報を記録する手段であり、電子ファイルとすることができる。【００２９】  手本データとは、制作者がユーザーに閲覧させたいと考えている人体の動作の節目の部分が記録された静止画像または映像のデータである。【００３０】  予告データとは、人体の動作を手本データより一定のタイミング早く電子機器の画面上に表示するために使用する静止画像や映像のいずれかまたは両方のデータである。これは、ユーザーが画面に表示された手本データの静止画像または映像を見て本来の人体の動作を確認すると同時に予告データの静止画像または映像を見てその後に生じる動作を認識することができるようにすることで、人体の動作の変移をより明確にイメージできるようにし、人体の動作への理解が促進されるようにするための工夫である。予告データに使用する静止画像および映像の内容はユーザーが手本データにおける人体の動作を理解できるものであればよく、手本データと同一の静止画像や映像であってもよいし、手本データとは別に制作された静止画像や映像であってもよい。また、表示する静止画像および映像は人体のものだけでなく、図形や文字や記号等であってもよい（例えば、ダンスで１回転する動作を静止画像の予告データとして表示する際、人体の静止画像に加えて「ＴＵＲＮ」の文字や円状の矢印の記号を付加する等）。予告データの表示方法は制作者が任意に指定することができる。たとえば、手本データより一定のタイミング先の経過時間における静止画像や映像を表示することや、手本データが表示されたタイミングから一定のタイミング先の経過時間までの範囲における予告データの静止画像や映像をまとめて表示することができる。表示された予告データの静止画像や映像は、画面上に静止させることも、画面上を提供者の指定した軌跡や速度で移動させることもできる。以上のような手本データおよび予告データの表示方法は制作者の指示に基づきシーケンスデータに定義される。【００３１】  一定間隔とは、予告データの静止画像や映像が表示されたタイミングから当該予告データが示す人体の動作を記録した手本データの静止画像または映像が表示されるタイミングまでの時間差である。該一定間隔の長さは制作者があらかじめ指定しシーケンスデータに定義されるが、ユーザーの指示によって変更することもできる。【００３２】  サインデータとは、画面上に表示される際の位置や形態（大きさ、形、色など）の変化や移動の軌跡等によってユーザーが人体の動作が変移するタイミングをあらかじめ認識できるようにするための静止画像や映像のデータである。たとえば、手本データを電子機器の画面上に表示する際、サインデータである静止画像の形態を時間の経過とともに変化させて表示し、手本データの静止画像が表示される瞬間にサインデータである静止画像が特定の形態を取って表示することで、ユーザーに手本データの静止画像のポーズを取るべきタイミングをあらかじめ理解させることができる。【００３３】  前記の、電子機器に表示される予告データの静止画像や映像の移動やサインデータの静止画像の変化および移動は、制作者がシーケンスデータに定義して指示することで、そのいずれかまたは両方を行いまたは行わないことができる。たとえば、サインデータの静止画像は表示位置から移動せず、予告データの静止画像をサインデータの静止画像の表示位置に向けて移動させ、手本データの静止画像が表示される瞬間に予告データの静止画像とサインデータの画像が重なり合うように表示することで、ユーザーに手本データの静止画像のポーズの形態および当該ポーズを取るべきタイミングを理解させることができる。【００３４】  ユーザーからの入力を受け付けると、電子機器の画面上に表示された手本データ、予告データ、サインデータの静止画像や映像、およびこれらに付属する付属データの表示方法や音楽データの再生方法を変更することができる。たとえば映像や音楽全体を一時停止やスロー再生で表示したり、予告データの静止画像や映像を非表示にしたり色彩を変えて表示したり、サインデータの静止画像を大きく表示したり別の静止画像に変更したりすることができる。これは各ユーザーが自己のもっとも理解しやすい画面表示方法を選択し、より効率的に人体の動作を理解できるようにするための工夫である。【００３５】  手本データ、予告データ、サインデータは、各々複数の静止画像や映像を定義して電子機器の画面上に表示することが可能である。これにより、たとえば複数名で構成されるチームによるダンスの振り付けなど、多数の人体が同時に実演する動作を表現することが可能になる。【００３６】  手本データ、予告データ、サインデータの静止画像および映像は、制作者やユーザーの指示に従い電子機器内部で所定の加工処理を行った上で表示することが可能である。例えばダンスにおいて手本データや予告データの静止画像を左右反転して画面に表示することで、ユーザーは画面に表示されている手本データの静止画像と同じ向きに動作をすれば良くなり、動作の変移を直感的に理解しやすくなる。【００３７】  電子機器は、静止画像データや映像データ、および音楽のデータを複数記録することが可能である。これにより一つの機器およびプログラムに多数の動作を記録し表示する動作をユーザーが選択できるようにしたり、電子機器をネットワークや外部記録装置に接続して画像データ、音楽データ、シーケンスデータ等を追加して記録し、電子機器が表示できる動作を追加したりすることができる。【００３８】  ユーザーは電子機器の画面上に表示された静止画像や映像のいずれかま���は両方の表示についてたとえば一時停止したりスロー再生などの操作を指示したくなると、電子機器に接続された入力手段を操作する。この入力手段は、ユーザーからの操作指示を受け入れることができる装置であればよく、例えばカーソルキーなどの入力キーデバイスやタッチパネル等のポインティングデバイスなどである。
【発明の効果】
【００３９】  本発明においては、ユーザーが効率的に人体の動作を理解できる静止画像や映像を効率的に制作することができる装置または方法、およびユーザーが人体の動作の形態および動作すべきタイミングを効率的に理解することができる静止画像または映像を表示する装置または方法が提供される。【００４０】  本発明においては、人体の動作の実演が記録されたデータから、人体の動作を理解する上で重要性の高い情報を識別した静止画像や映像を自動的に生成でき、よりユーザーがより効率良く理解を得られる表現を少ない時間、費用、労力で制作できる。【００４１】  本発明では、ユーザーが人体の動作の変移および動作を取るべきタイミングを同時に確認できるよう静止画像または映像を表示する装置または手段を提供することで、人体の動作の変移および動作を取るべきタイミングを別々に確認する場合より効果的かつ効率的な理解が促進される。【００４２】  本発明では手本データ、予告データ、サインデータ、付属データの静止画像および映像に対し一時停止、コマ送り、左右反転等さまざまな操作が可能となる。これにより、各々のユーザーが自己の理解を促進する上で最適であると判断した表示方法を柔軟に選択することが可能になる。
【図面の簡単な説明】
【００４３】
【図１】本発明の実施の形態にかかる電子機器の構成を示す構成図である。
【図２】本発明の実施の形態にかかる処理ステップのフローを示すフローチャートである。
【図３】本発明の実施の形態にかかる特徴点の設定の様子を示す説明図である
【図４】本発明の実施の形態にかかる節目のデータの修正の様子を示す説明図である。
【図５】本発明の実施の形態にかかる人体の動作の変移の表示の様子を示す説明図である。
【発明を実施するための形態】
【００４４】  以下、図面を参照して、本発明の実施の形態について説明する。
本発明の電子機器の構成を図１に示す。電子機器１には、表示装置１０、基礎データ５となるデータの読取装置であるデータ入力手段２と、基礎データ５となるデータの録画装置であるデータ入力手段３と、前記基礎データ５を記録するデータ記録手段４と、基礎データ５を解析するデータ処理手段６と、手本データ１５、予告データ１６、サインデータ１７、音声データ１８、シーケンスデータ１９、および付属データ２０を記録するデータ記録手段７と、データ記録手段７に記録されたデータの表示を制御するデータ制御手段８と、データ記録手段７に記録されたデータを表示装置１０に出力する画像表示手段９とが備えられる。
【実施例】
【００４５】  電子機器１は、さらに、手本データ１５、予告データ１６、サインデータ１７、音声データ１８、シーケンスデータ１９、および付属データ２０の読取装置であるデータ入力手段１１を有している。【００４６】  電子機器１に接続されている入力手段１２は、制作者から、基礎データ５に記録されている動作において動作を実演している人体の静止画像または映像に対する特徴点の位置の設定、データ処理手段６が定義した節目の位置の修正、および手本データ１５、予告データ１６、サインデータ１７、音声データ１８、シーケンスデータ１９、および付属データ２０の表示方法や再生方法の設定についての指示を受け付ける。【００４７】  データ処理手段６は、データ記録手段４から呼び出した基礎データ５に記録されている人体の動作を解析し節目の動作が表現されている部分のデータを識別する機能ブロック２２と、該識別したデータから静止画像または映像のデータを生成し手本データ１５として定義してデータ記録手段７に出力する機能ブロック２３とを有する。【００４８】  制御手段８は、入力手段１４と接続され、ユーザーから手本データ１５、予告データ１６、サインデータ１７、音声データ１８、シーケンスデータ１９、および付属データ２０の表示方法および再生方法についての操作の入力を受け付ける。【００４９】  制御手段８には音声データ１８を再生する音声再生装置１３が接続されている。【００５０】  次に、図２に本発明の処理の実施の形態を、フローチャートを用いて説明する。まず、制作者の選択に従い、録画または読取によって基礎データ５となる人体の動作のデータを取り込む（Ｓ２）。データ入力手段２（図１）によって読み取られたデータ（Ｓ４）またはデータ入力手段３（図１）によって録画されたデータ（Ｓ４）が、基礎データ５（図１）として定義される（Ｓ８）。【００５１】  基礎データ５に記録された動作を表現している人体の静止画像（映像を基礎データとする場合は該映像のある特定時点の静止画像）に対し、制作者の指示に従い特徴点の位置を設定していく（Ｓ１０）。【００５３】  基礎データ５に対して解析手段６（図１）の機能ブロック２２に基づく解析をおこない（Ｓ１２）、節目となるデータを定義する（Ｓ１４）。制作者は、入力手段２１（図１）を用いて該定義の結果をより自己の意図に適合するよう修正することができる。【００５４】  節目として定義されたデータをもとに静止画像または映像のデータを生成し（Ｓ１６）、手本データとして定義する（Ｓ１８）。なお、制作者が指定した場合はＳ１６で指定された以外の静止画像または映像を手本データとして定義することもできる。【００５５】  手本データとして定義されたデータは、データ記録手段７（図１）に記録される（Ｓ２０）。【００５６】  制作者の指示したデータを、読取装置１１（図１）を介して読み込み（Ｓ２２）、制作者の指示に従い予告データ、サインデータ、音声データ、シーケンスデータ、付属データとして定義する（Ｓ２４）。予告データは手本データと同一のデータを定義することができるが、制作者が指示した場合は手本データとは別の静止画像または映像のデータを定義することもできる。【００５７】  予告データ、サインデータ、音声データ、シーケンスデータ、付属データとして定義されたデータは、データ記録手段７（図１）に記録される（Ｓ２６）。【００５８】  制御手段（図１、８）が、シーケンスデータの指示する内容に従い、手本データ、予告データ、サインデータ、付属データ、音声データをデータ記録手段から呼び出し、データの再生命令を発行する（Ｓ２８）。【００５９】  再生命令の内容に従い、表示手段は手本データ、予告データ、サインデータ、付属データを表示装置に表示し、音声再生手段は音声データを再生する（Ｓ３０）。【００６０】  図３には、特徴点の設定方法の例を示す。電子機器１に接続された表示装置２１に表示された設定画面１００において、節目となる動作を定義する対象となる基礎データ５の人体の静止画像（映像を基礎データとする場合は該映像のある特定時点の静止画像）に対し、入力装置１２を用いて特徴点とする位置の座標を設定していく。特徴点の位置は制作者が任意に設定していくが、人体は関節を基軸として動作することから、関節にあたる位置を特徴点として設定することが基本となる。図３では、右肩（１０２）、右肘（１０４）、右手首（１０６）、左肩（１０８）、左肘（１１０）、左手首（１１２）、背中（１１４）、腰（１１６）、右股（１１８）、右膝（１２０）、右足首（１２２）、左股（１２４）、左膝（１２６）、左足首（１２８）の関節、および頭（１３０）の位置を特徴点として設定している。【００６１】  図４は、節目の定義結果を修正する方法の例を示す。電子機器１に接続された表示装置２１に表示された修正画面１４２には、経過時間を示すタイムライン（１３２）と、基礎データ５に記録された人体の動作においてタイムラインが示す各経過時間の時点で実演されている人体の動作の静止画像が表示される（１３４、１３６、１３８）。表示された静止画像のうち節目として定義されたものには、そのことを制作者に示す表示がされる（１４０、１４２）。制作者は、入力装置（図１、１２）を使用し、画面に節目として定義された静止画像が節目にあたらないと判断した場合はこれを節目として定義しないよう、また、節目として定義されなかった静止画像が節目にあたると判断した場合にはこれを節目として定義するよう、指示を出すことができる。【００６２】  図５は、表示装置への表示例を示す。電子機器１に接続された表示装置１０に表示された再生画面１５０には、手本データ（図１、１５）に記録された静止画像１５２と予告データ（図１、１６）に記録された静止画像１５４が表示される。静止画像１５２が表現する動作は一定の経過時間を経て静止画像１５４で表現されていた動作に切り替わり、その切り替わるタイミングがサインデータ（図１、１７）に記録された静止画像または映像の変化によって表現される（１６２）。サインデータに記号（１５６）や文字（１５８）等が動作の変遷をユーザーに示すための静止画像または映像の情報として定義されている場合は、これが再生画面１５０上に表示される。さらに、付属データ（図１、２０）として静止画像や文字等が定義されている場合は、これらが再生画面１５０上に表示される（１６０）。これらのデータの表示および表示の変化は、シーケンスデータ（図１、１��）によって定義された内容に従って行われる。【００６３】  以上、本発明の実施の形態につき述べたが、本発明は既述の実施の形態に限定されるものではなく、本発明の技術的思想に基づいて各種の変形、変更および組み合わせが可能である。
【符号の説明】
【００６４】１  電子機器
２  データ入力手段（基礎データ読取用）
３  データ入力手段（基礎データ録画用）
４  データ記録手段（基礎データ用〕
５  基礎データ
６  データ処理手段
７  データ記録手段（その他データ用）
８  データ制御手段
９  画像表示手段
１０  表示装置
１１  データ入力手段（その他データ用）
１２  入力手段（制作者用）
１３  音楽再生装置
１４  入力手段（ユーザー用）
２１  表示装置（制作者用）
【図１】
2013146511.tif 000003
【図２】
2013146511.tif 000004
【図３】
2013146511.tif 000005
【図４】
2013146511.tif 000006
【図５】
2013146511.tif 000007