(57)【要約】【課題】例えば映像や音声の編集を行う編集装置においてそれぞれ映像データ、音声データと対応づけられた映像サムネイル画像、音声サムネイル画像を表示する場合に、音声サムネイル画像が音声データを表すものであることが明示されるようにする。【解決手段】音声データと対応づけられるべき音声サムネイル画像を少なくとも２色以上の画素データを含む複数色画像データにより生成する。これにより、音声データと対応づけられるサムネイル画像として、音声データであることを明示することが可能となり、従来において全黒画像などで表示していた場合に生じていた映像サムネイル画像との混同を効果的に防止できる。【選択図】図４
2007329624.tif 000002
【特許請求の範囲】
【請求項１】
映像データと対応づけられた画像データと、音声データと対応づけられた画像データとを表示するための表示システムであって、
画像データを生成する画像データ生成手段と、
上記画像データ生成手段により少なくとも２色以上の画素データを含む複数色画像データが生成されるように制御して、生成された上記複数色画像データを所要の記録媒体に記録された音声データと対応づけると共に、上記映像データと対応づけられた画像データと上記複数色画像データとが所要の表示手段に表示されるように制御する制御手段と、
を備えることを特徴とする表示システム。
【請求項２】
上記制御手段は、
上記音声データの記録時間長を表す情報内容を有する上記複数色画像データが生成されるように上記画像データ生成手段を制御する、
ことを特徴とする請求項１に記載の表示システム。
【請求項３】
上記制御手段は、
上記音声データの記録時間長に応じた画像サイズによる上記複数色画像データが生成されるように上記画像データ生成手段を制御する、
ことを特徴とする請求項１に記載の表示システム。
【請求項４】
テキストデータを入力する入力手段と、
所定の読み上げ速度の情報に基づき、テキストデータの所定数の文字ごとの読み上げタイミングを示すテキストタイムコードを生成すると共に、このテキストタイムコードをテキストデータに付した読み上げ用データを生成する読み上げ用データ生成手段とをさらに備えると共に、
上記制御手段は、
指示に応じ、上記所要の記録媒体への音声データの記録が行われるように制御し、さらに上記読み上げ用データに基づき、所要の表示手段において表示される上記テキストデータに基づく文字がインテンド表示されるように制御すると共に、
上記入力手段により入力されたテキストデータの少なくとも一部を含む上記複数色画像データが上記画像データ生成手段により生成されるように制御し、生成された複数色画像データと、上記指示に応じて上記所要の記録媒体に記録された音声データとを対応づけるようにされている、
ことを特徴とする請求項１に記載の表示システム。
【請求項５】
上記制御手段は、
上記複数色画像データとして、上記入力手段により入力されたテキストデータに基づく文字が順次スクロールされる内容を有する動画像データが生成されるように上記画像データ生成手段を制御するようにされている、
ことを特徴とする請求項４に記載の表示システム。
【請求項６】
上記制御手段は、
上記動画像データとして、上記入力手段により入力されたテキストデータに基づく文字が一部分ずつ順次拡大表示される内容を有する動画像データが生成されるように上記画像データ生成手段を制御する、
ことを特徴とする請求項４に記載の表示システム。
【請求項７】
上記制御手段は、
上記動画像データとして、上記テキストタイムコードに基づくタイミングで上記テキストデータに基づく文字が順次インテンド表示される内容を有する動画像データが生成されるように上記画像データ生成手段を制御する、
ことを特徴とする請求項４に記載の表示システム。
【請求項８】
画像データを生成する画像データ生成手段を備え、映像データと対応づけられた画像データと音声データと対応づけられた画像データとを表示するための表示システムにおける表示方法であって、
上記画像データ生成手段により少なくとも２色以上の画素データを含む複数色画像データが生成されるように制御して、生成された上記複数色画像データを所要の記録媒体に記録された音声データと対応づけると共に、上記映像データと対応づけられた画像データと上記複数色画像データとが所要の表示手段に表示されるように制御する、
ことを特徴とする表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば業務用の映像・音声編集システムなど、特に映像と音声の編集を行ってコンテンツを作成するためのシステムに適用して好適な表示システムと、表示方法とに関する。
【背景技術】
【０００２】
例えば、テレビジョン放送の放送コンテンツなど映像データと音声データとを合成したＡＶコンテンツを作成するための編集装置が広く普及している。
このような編集装置に対しては、例えばビデオカメラ装置により撮影された映像データが入力される。また、音声データについては、外部で別途生成された音声データが入力されたり、或いはニュースコンテンツなどの作成時においては、マイク入力に基づく録音動作を行って音声データを得るようにされている。
【０００３】
そして、これら映像データ・音声データの編集時においては、編集対象とするデータの識別や選択が可能となるように、例えば次の図２７に示すようなサムネイル画像の表示により視覚的に各データを表すようにされている。
すなわち、映像データについては、例えばその先頭のシーンなど映像中の所定の一部の画像を表示するようにされている。
また、音声データについてもサムネイル画像が存在し、従来では図示するようにして全黒画像によるサムネイル画像を表示するようにされていた。
【０００４】
なお、関連する従来技術については以下の特許文献を挙げることができる。
【特許文献１】特開２００３−１７４６２５号公報
【特許文献２】特開２００４−２６０５２１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記のように全黒画像を音声データを表すサムネイル画像として表示してしまうと、それが音声データを表すものであるのか、或いは全黒による映像データ（例えば暗闇を映したものなど）に基づくものであるかの区別がつかなくなるといった問題が生じる。すなわち、その区別のために、逐次サムネイル画像を指定してデータ内容を再生させなければならないといった問題が生じる。
また、特に音声データが複数存在する場合には、個々のサムネイル画像がどのような音声データを表したものであるかの区別がつかないといった問題も生じる可能性があり、その場合もユーザは、内容把握のために音声を逐次再生させなければならいといった問題が生じる。
【０００６】
これらのことから、従来の音声サムネイル画像の表示手法によると、編集時の作業効率を著しく低下させる可能性がある。
【課題を解決するための手段】
【０００７】
そこで、本発明では以上のような問題点に鑑み、表示システムとして以下のように構成することとした。
つまり、本発明の表示システムは、映像データと対応づけられた画像データと、音声データと対応づけられた画像データとを表示するための表示システムであって、先ず画像データを生成する画像データ生成手段を備える。
また、上記画像データ生成手段により少なくとも２色以上の画素データを含む複数色画像データが生成されるように制御して、生成された上記複数色画像データを所要の記録媒体に記録された音声データと対応づけると共に、上記映像データと対応づけられた画像データと上記複数色画像データとが所要の表示手段に表示されるように制御する制御手段を備えるものである。
【０００８】
上記のようにして、記録された音声データと対応づけられた複数色画像データを、映像データと対応づけられた画像データと共に表示できれば、例えば映像・音声の編集時に対応して表示する映像・音声編集画面において、音声データを表す音声サムネイル画像は複数色により表示することができる。
このように単色ではなく複数色の画像データとされることで、例えば所定の文字やマーク等を表す画像データとすることができる。すなわち、これによれば、例えば音声データであることを表す情報を示す画像データとすることや、さらには音声データの種別やデータ内容などに関する情報を示す画像データとすることが可能となる。
【発明の効果】
【０００９】
このようにして本発明によれば、複数色画像データにより音声データであることを示す画像データを表示することができるので、映像データを表す画像データとの区別を直感的に行うことが可能となるようにすることができる。そして、これによれば、編集画面上において画像データを指定して対応するデータを逐次再生させて映像か音声かの確認を行う必要はなくなり、その分編集時の作業効率を向上させることができる。
また、複数色画像データとすれば、音声データの種別やデータ内容などに関する情報を示す画像データとすることも可能であり、これにより、各音声データの区別の際にも、逐次それらの画像データを指定して対応するデータの再生を実行させて逐次内容確認を行うといった手間が省かれる。すなわち、この点でも編集時の作業効率を向上させることができる。
【発明を実施するための最良の形態】
【００１０】
以下、発明を実施するための最良の形態（以下実施の形態とする）について説明していく。
【００１１】
＜第１の実施の形態＞
［編集装置の構成］
図１は、本発明の表示システムの一実施形態としての、第１の実施の形態の編集装置１の内部構成を示したブロック図である。
なお、図１では、編集装置１の内部構成について、主に後述する実施の形態としての動作を行うために必要な部分のみを抽出して示しており、他の部分については省略している。
【００１２】
図１において、この編集装置１としては、例えばテレビ放送業者や番組制作業者等が、取材現場などにおいて撮影した映像や、入力音声についての編集を行う用途を想定して製造された、ポータブルタイプの業務用編集装置とされる。
この編集装置１は、図示する光ディスクＤとして、例えばＤＶＤ（Digital Versatile Disc）やBlu-ray Disc（Blu-ray：登録商標）などの光ディスク記録媒体に記録された映像・音声データについての編集等を行うように構成されている。また、編集した映像・音声データを光ディスクＤに記録することもできるようにされる。
【００１３】
ここで、参考までに、実施の形態の編集装置１が対応する光ディスクＤについて具体的に述べておくと、例えばレーザ波長λ＝４０５nm、ＮＡ（開口数）＝０．６５による記録再生が行われ、記録膜としては相変化膜を有するようにされてデータの書き換えが可能とされる。記録容量としてはおよそ数十ＧＢ（ギガバイト）程度と、比較的大容量とされ、これによって業務用としての高解像度の映像にも対応できるようにされている。
【００１４】
この場合、光ディスクＤに対しては、特に外部のビデオカメラ装置により撮影・記録された映像データが格納されるものとして想定される。また、本実施の形態では業務用途を想定しているため、映像データに対しては、そのフレーム画像ごとにタイムコード（映像タイムコード）が付されている。つまり、この映像タイムコードにより、映像中のフレーム画像の時間軸上の位置を管理することができるようにされている。
【００１５】
編集装置１に対しては、このような光ディスクＤに対する実際の記録／再生動作を行うためのディスクドライブ２が設けられる。
ディスクドライブ２は、その内部に装填された光ディスクＤに記録されたデータの記録／再生を行うための構成として、光学ヘッド、スピンドルモータ、サーボ回路、及び再生データを得るためのデコーダ、記録データ生成のためのエンコーダなどを備えて構成される。
ディスクドライブ２により光ディスクＤから再生された映像データは、図示する信号処理部３に供給されるようになっている。また、光ディスクＤに対し記録すべき映像データは、信号処理部３から当該ディスクドライブ２に対して入力されるようになっている。
【００１６】
信号処理部３は、映像データについての各種の映像信号処理と、音声データについての各種の音声信号処理を行うことができるように構成される。
信号処理部３は、図示する映像入力端子ＴVinからも映像データを入力することができるように構成される。これにより、例えば外部のカメラ装置にて撮影された映像データを直接的に入力することもできるようにされている。
また、特に本実施の形態の編集装置１としては、図示する音声入力端子ＴAinから入力される音声信号についての記録を行うことが可能とされるが、これに対応して信号処理部３には、音声入力端子ＴAinから入力される音声信号について増幅処理を行うマイクアンプと、Ａ／Ｄコンバータとが備えられている（図示せず）。
信号処理部３は、後述するＣＰＵ（Central Processing Unit）５からの指示に応じて、音声入力端子ＴAinからの入力に基づく音声データをＣＰＵ５に供給するようにされる。ＣＰＵ５は入力される音声データを不揮発性メモリ７に対して記録するようにされる。
【００１７】
また、信号処理部３は、ＣＰＵ５からの指示に基づき、素材映像としての映像データの一部を切り出すようにして映像クリップを生成したり、複数の映像クリップをつなぎ合わせて一連の映像データを生成するなどといった編集処理や、映像データに対して音声データを合成してＡＶ（Audio Visual）データファイル（以下単にＡＶファイルとも言う）を生成する合成処理を行うことも可能に構成される。
【００１８】
さらに、この場合の信号処理部３としては、音声データについて時間軸方向への圧縮／伸張処理（時間軸圧縮／伸張処理）も行うことが可能とされる。信号処理部３は、ＣＰＵ５から指示される時間長の情報に基づき、対象とする音声データの時間長がこの指示された時間長となるように時間軸圧縮／伸張処理を施すようにされる。
【００１９】
また、信号処理部３に対しては、図示するようにして映像出力端子ＴVoutと音声出力端子ＴAoutとが接続される。これによって映像データ、音声データを外部出力することができるようにされる。
【００２０】
また、映像出力端子ＴVoutに供給される映像データは、分岐して後述するキャラクタ発生器１１に対しても供給されるようになっている。
さらに、音声出力端子ＴAoutに供給される音声データは、図示するＤ／Ａコンバータ９に対しても分岐して供給される。Ｄ／Ａコンバータ９に供給された音声データはＤ／Ａ変換され、図示するアンプ１０により増幅された後、スピーカＳＰにより出力されることになる。
【００２１】
キャラクタ発生器１１は、文字（数字・記号等も含む）やアイコン等のキャラクタデータを生成する。
このキャラクタ発生器１１は、信号処理部３からの映像データとキャラクタデータとを合成した表示データを生成することができる。或いは、キャラクタのみが表示されるように表示データを生成することもできるようにされる。さらには、信号処理部３からの映像データにキャラクタを重畳せずにそのまま出力することも可能とされる。
キャラクタ発生器１１は、それらの動作の切替をＣＰＵ５からの指示に基づき行うようにされる。
【００２２】
キャラクタ発生器１１からの出力データは、表示駆動部１２に供給される。
表示駆動部１２は、例えば液晶ディスプレイなどとされる表示部１３を、キャラクタ発生器１１からの入力データに基づき表示駆動する。これによって表示部１３上にキャラクタ発生器１１からの出力に基づく画像表示が行われるようになっている。
【００２３】
ＣＰＵ５は、起動されたプログラムに基づいて編集装置１の全体制御、演算処理を行う。例えば、図示する操作部８からの操作入力に応じた動作や、ディスクドライブ２に装填された光ディスクＤについての記録／再生動作、アクセス動作等を制御する。
また、特に本実施の形態の場合、ＣＰＵ５は、上述した音声入力端子ＴAinから入力音声に基づく録音時において、録音開始時点からのタイムカウントを行い、そのカウント値に基づいて音声データに音声タイムコードを付す動作も行うようにされる。
【００２４】
このＣＰＵ５に対しては、図示するようにＲＯＭ（Read Only Memory）４、ＲＡＭ（Random Access Memory）６、不揮発性メモリ７が備えられる。
上記ＲＯＭ４には、ＣＰＵ５の動作プログラム、プログラムローダー等が記憶される。特に本実施の形態の場合、このＲＯＭ４に対しては、後述する第１の実施の形態としての動作を実現するための処理動作（図５）をＣＰＵ５に実行させるためのプログラム４ａも格納される。
【００２５】
また、上記ＲＡＭ６には、ＣＰＵ５がプログラムを実行する上でのデータ領域、タスク領域が一時的に確保される。
また、上記不揮発メモリ７は、データの書き換えが可能で且つ電源オフ後も記録したデータが保持される不揮発性のメモリである。不揮発性メモリ７には例えば各種演算係数、プログラムで用いるパラメータ等が記憶される。また、特に本実施の形態の場合は、音声入力端子ＴAinからの入力に基づく録音音声データなどもこの不揮発性メモリ７に対して記録されるものとなる。
【００２６】
操作部８は、編集装置１の筐体表面に設けられた各種の操作子を備える。操作部８が備える操作子としては、方向指示のための十字キーや各種項目の決定を行うための決定キー、各種のボリューム調整や数値調整の操作に用いられるサーチダイヤル等が設けられる。
操作部８は、各操作子ごとの操作情報（操作信号）をＣＰＵ５に供給するようにされる。ＣＰＵ５は操作部８からの操作情報に応じた処理動作を実行し、これによってユーザの指示に応じた動作が実現されるようになっている。
【００２７】
［第１の実施の形態としての動作］
続いて、次の図２〜図４を参照して、上記により説明した編集装置１によって行われる動作について説明する。
先ず、前提として、当該編集装置１を用いた放送コンテンツ等のＡＶ（Audio Visual）コンテンツの作成にあたっては、外部のビデオカメラ装置により撮影され、光ディスクＤに対して記録された映像データ（つまり編集前の素材映像）についての情報が編集装置１に取得される必要がある。このために、先ずユーザは、このように撮影映像が記録された光ディスクＤを編集装置１に対して装填するようにされる。
【００２８】
編集装置１では、装填された光ディスクＤについての読み出しを行って、各映像データのサムネイル画像（後述する音声サムネイル画像と区別して映像サムネイル画像と呼ぶ）を取得するようにされる。
この場合、映像サムネイル画像は、編集装置１自体が光ディスクＤに記録された映像データに基づき生成するようにされる。具体的には、光ディスクＤに記録される映像データの所定の一部の画像データ（例えば時系列上で先頭に位置する画像データ）を再生して、その画像データに基づき映像サムネイル画像を生成するようにされる。
その上で、編集装置１は、生成した映像サムネイル画像の一覧を、表示部１３上に編集画面として表示するようにされる。
【００２９】
図２は、このような編集画面の表示例を示している。
図示するようにして編集画面には、映像サムネイル画像と共に、それら映像サムネイル画像が示す映像データを選択するためのカーソルＣＲとが表示される。ユーザは、図１に示した操作部８に設けられる例えば方向キー（図示せず）等の所定の操作子を操作することで、上記カーソルＣＲを移動させることができ、これによって各映像サムネイル画像が示す映像データを選択することができる。また、例えば決定キー（図示せず）など操作部８の別の所定操作子を操作することで、カーソルＣＲにより選択した映像データを編集や再生の対象として指定することができる。
【００３０】
なお、指定した映像データについての編集処理内容としては、先に述べたようにして映像データの一部を切り出すようにして映像クリップを生成したり、複数の映像クリップをつなぎ合わせて一連の映像データを生成するなどといった処理が可能とされるが、映像データの編集処理自体は、本実施の形態としての動作に直接的に関わるものではないので、そのＧＵＩ（Graphical User Interface）や動作内容についての説明は省略する。
【００３１】
またこの場合、編集装置１では、編集画面上に表示した映像サムネイル画像と映像データとの対応関係が把握できるように、取得（生成）した映像サムネイル画像については、その生成の基とした映像データとの対応づけを行っておくようにされる。
【００３２】
そして、このような編集画面が表示された状態において、編集装置１では、例えば映像データと合成すべきナレーション音声等の取得のために、録音動作を行うことが可能とされている。
この場合、録音動作は、操作部８を介した所定操作に応じて実行するようにされている。つまり、このような録音開始を指示するための所定操作に応じ、編集装置１は図１に示した音声入力端子ＴAinからの入力音声についての録音動作を開始するようにされる。具体的には、ＣＰＵ５が、信号処理部３により音声入力端子ＴAinからの入力音声についての増幅処理・Ａ／Ｄ変換処理を開始させ、これにより得られる音声データの不揮発性メモリ７への記録を行うものである。
【００３３】
このような音声データの録音が完了したことに応じては、その音声データを表すための音声サムネイル画像を生成するようにされる。
本実施の形態の場合、この音声サムネイル画像としては、次の図３に示すような画像データを生成するようにされる。つまり、この図３に示されているように、この場合の音声サムネイル画像としては、音声データであることを示すマークとして、マイクのマークが示されると共に、当該音声データが何度目の録音動作により得られたものであるかを示すｔａｋｅ数の情報が示される。さらには、当該音声データの録音時間長を数値により示すduration timeの情報も示される。
【００３４】
このような音声サムネイル画像としての画像データは、ＣＰＵ５の指示に応じてキャラクタ発生器１１が生成するようにされる。つまり、ＣＰＵ５は、ｔａｋｅ数の情報とduration timeの情報とをキャラクタ発生器１１に指示して、図３に示すような音声サムネイル画像を生成させる。
なお、上記duration timeの情報については、ＣＰＵ５が自ら取得することができる。すなわち、先の図１において、入力音声の録音時にはＣＰＵ５が音声タイムコードを生成してそれを音声データに付すようにされていることについて述べたが、これによって録音動作の完了時、ＣＰＵ５は音声データの記録時間長（duration time）の情報を取得することができる。
【００３５】
そして、ＣＰＵ５は、このようにしてキャラクタ発生器１１に生成させた音声サムネイル画像を取得すると、当該音声サムネイル画像を、録音された音声データと対応づけるようにして不揮発性メモリ７に対して記録するようにされる。これら音声サムネイル画像と録音された音声データとの対応づけは、それらの対応関係を示す管理情報を生成して行うようにされる。
【００３６】
さらに、このように音声サムネイル画像と録音された音声データとの対応づけを行うと、次の図４に示されるようにして、生成した音声サムネイル画像を編集画面内に追加表示するようにして、映像サムネイル画像と共に表示するようにされる。この図４では、録音動作が２回行われた後の編集画面の例を示しており、音声サムネイル画像としては、図示するように「ｔａｋｅ１」を示すものと「ｔａｋｅ２」を示すものとが表示されている。
【００３７】
上記のようにして第１の実施の形態では、編集画面上にて表示されるべき音声データを表す音声サムネイル画像として、音声データであることを表すマークが示されるようにしている。このことで、当該サムネイル画像が映像データのサムネイル画像であるか音声データのサムネイル画像であるかの区別を直感的に行うことが可能となるようにすることができる。
これによれば、編集画面上においてサムネイル画像を指定して対応するデータを逐次再生させて映像か音声かの確認を行う必要はなくなり、その分編集時の作業効率を向上させることができる。
【００３８】
さらには、ｔａｋｅ数やduration timeの情報を示すことによって、そのサムネイル画像と対応づけられた音声データの内容に関する情報も表すことができ、これによって各音声データの区別の際にも、逐次サムネイル画像を指定して対応するデータの再生を実行させて内容確認を行うといった手間が省かれることになる。すなわち、この点でも編集時の作業効率を向上させることができる。
【００３９】
［処理動作］
図５のフローチャートは、上記により説明した第１の実施の形態としての動作を実現するために行われるべき処理動作について示している。なお、この図に示す処理動作は図１に示したＣＰＵ５がＲＯＭ４に格納されるプログラム４ａに基づいて実行するものである。
また、この図に示す処理動作が実行されるにあたっては、既に編集装置１に光ディスクＤが装填された状態にあるとする。
【００４０】
図５において、先ずステップＳ１０１では、編集画面の表示を行うための処理を実行するようにされる。
つまり、先ずは編集画面上に表示すべき映像サムネイル画像を取得するために、ディスクドライブ２に対する制御を行って光ディスクＤに記録される映像データの所定の一部の画像データ（例えば時系列上の先頭の画像データ）を再生させる。そして、この画像データに基づき映像サムネイル画像を生成する。その上で、生成した映像サムネイル画像をキャラクタ発生器１１に供給して、それらの一覧が先の図２に示したような編集画面として表示部１３上に表示されるように指示を行う。
【００４１】
続くステップＳ１０２では、録音開始指示を待機するようにされる。この録音開始指示として、操作部８からの所定の操作信号の入力があった場合は、ステップＳ１０３に進み、録音開始処理を実行するようにされる。すなわち、音声入力端子ＴAinからの入力音声についての増幅・Ａ／Ｄ変換処理を信号処理部３に開始させると共に、これにより得られる音声データの不揮発性メモリ７に対して記録するようにされる。
【００４２】
続くステップＳ１０４では、停止指示を待機するようにされる。録音停止指示としての、操作部８からの所定の操作信号の入力があった場合は、ステップＳ１０５に進み、録音停止処理を実行するようにされる。すなわち、信号処理部３によるＡ／Ｄ変換・増幅処理を停止させると共に、入力音声データの不揮発性メモリ７への録音動作を停止する。
【００４３】
続くステップＳ１０６では、duration timeを取得する。すなわち、この図に示す処理とは並行した処理により録音音声データに対して付した音声タイムコードの情報に基づき、音声データの記録時間長としてのduration timeの情報を取得するようにされる。
【００４４】
そして、ステップＳ１０７では、音声サムネイル画像の生成処理を実行する。つまり、ｔａｋｅ数の情報とduration timeの情報とをキャラクタ発生器１１に指示して、先の図３に示したような構成による音声サムネイル画像を生成させる。
さらに、ステップＳ１０８では、録音した音声データとの対応づけ処理を行う。つまり、生成された音声サムネイル画像を不揮発性メモリ７に記録すると共に、この記録された音声サムネイル画像が、録音された音声データと対応づけられて管理されるようにするための管理情報を生成する。なお、このような管理情報も例えば不揮発性メモリ７に記録されればよい。
【００４５】
その上で、ステップＳ１０９では、音声サムネイル画像を編集画面上に表示するための処理を実行する。
つまり、音声サムネイル画像が表示部１３上に表示中の編集画面内に追加表示されるように、キャラクタ発生器１１に対する指示を行う。これによって編集画面としての同一画面上に、映像データと対応づけられた映像サムネイル画像と、音声データと対応づけられた音声サムネイル画像とが表示される。
【００４６】
［第１の実施の形態の変形例］
なお、上記による説明では、音声サムネイル画像としては、duration timeの情報が数値とされる画像データを生成するものとしたが、これに代えて、次の図６に示すようにduration timeの情報を例えばバーの長さにより表す画像データを生成するようにすることもできる。すなわち、数値以外の情報によりduration timeを表すようにすることもできる。
【００４７】
或いは、次の図７に示されるようにして、音声サムネイル画像としては、それと対応づけられるべき音声データのduration timeの時間長に応じたサイズの画像データを生成するようにすることもできる。
この図７では、例えばduration timeの時間長が１分の場合（図７（ａ））と２分の場合（図７（ｂ））とを比較した例を示しており、この場合はduration timeの時間長が長いほど音声サムネイル画像の一方の辺の長さのみが長くなる場合を例示している。
【００４８】
＜第２の実施の形態＞
［編集システムの概要］
続いては、第２の実施の形態について説明する。
図８は、第２の実施の形態の表示システムとしての、編集システム２０の概要について説明するための図である。
この第２の実施の形態の編集システム２０は、図示するようにして少なくとも編集装置２１とパーソナルコンピュータ３１とを含んで構成されている。
【００４９】
編集装置２１は、この場合もテレビ放送業者や番組制作業者等が、取材現場などにおいて撮影した映像や入力音声についての編集を行う用途を想定して製造されたポータブルタイプの業務用編集装置とされる。後の説明により明らかとなるが、この編集装置２１は、先の図１に示した編集装置１とほぼ共通の構成を有するようにされる。但し、本実施の形態の編集装置２１としては、編集装置１に対し、後述する第２の実施の形態としての動作を実現するための構成が追加されたものとなっている。
【００５０】
また、パーソナルコンピュータ３１としては、一般的なパーソナルコンピュータを想定している。この場合のパーソナルコンピュータ３１としては、編集装置２１と共に取材現場等の屋外での使用が想定されるため、いわゆるノートブック型のパーソナルコンピュータであるもとする。
第２の実施の形態において、このパーソナルコンピュータ３１は、主にナレーション原稿を入力するためのテキスト入力装置として機能することになる。
【００５１】
［編集装置の構成］
図９は、第２の実施の形態の編集装置２１の内部構成を示したブロック図である。
なお、この図９に示す編集装置２１について、既に先の図１に示した編集装置１と同様となる部分については同一符号を付して説明を省略する。
この図９と先の図１とを比較してわかるように、第２の実施の形態の編集装置２１としては、編集装置１の構成に対し、ＵＳＢ（Universal Serial Bus）インタフェース２３、ＵＳＢ端子Ｔusb、読み上げ時間計算／読み上げ用データ生成部２４が追加されたものとなっている。
【００５２】
先ず、ＵＳＢインタフェース２３は、ＵＳＢ端子Ｔusbに接続されたＵＳＢケーブルを介して接続される外部機器（特にこの場合は図８に示したパーソナルコンピュータ３１）との間でデータ通信を行うために設けられる。特に、この場合のＵＳＢインタフェース２３を介しては、後述するようにしてパーソナルコンピュータ３１側で入力されたテキストデータ等の各種のデータやコマンドのやりとりが行われる。
【００５３】
また、上記読み上げ時間計算／読み上げ用データ生成部２４は、ＣＰＵ５から入力されるテキストデータに基づく文字列について、それらを予め定められた所定の読み上げ速度で読み上げたときの時間長を計算すると共に、テキストデータに対し、そのテキストデータに基づく文字列を上記所定の読み上げ速度で読み上げるときの、その読み上げ位置を示すためのテキストタイムコードを付して、読み上げ用データを生成する。
【００５４】
この場合、読み上げ時間長の計算手法としては、例えばひらがなやカタカナなど１文字が１発語となる文字については、その文字に対し、上記所定の読み上げ速度としての１語分の読み上げ時間長を表す所定の係数を乗算するようにされる。但し、漢字などで１文字が１発語とならない文字については、その発語数に対して上記所定の係数を乗算してその文字の読み上げに要する時間長を計算するようにされる。
このようにして入力テキストデータの合計の読み上げ時間長を計算する。
【００５５】
また、上記読み上げ用データについても、同様にテキストデータを構成するひらがなやカタカナ、漢字など、その文字の発語数に応じて各文字ごとのテキストタイムコードを付すようにされる。
【００５６】
ここで、上記手法による読み上げ時間の計算や各文字ごとのテキストタイムコードの付与にあたっては、テキストデータの各文字ごとの発語数の情報を得る必要がある。このために読み上げ時間計算／読み上げ用データ生成部２４には、例えば予めテキストデータとして想定される各文字ごとにその発語数を格納したテーブル情報が記憶されており、このテーブル情報を参照して入力テキストデータの各文字ごとの発語数の情報を得るようにされている。
なお、ここで言う「文字」とは、ひらがなやカタカナ、漢字以外にも、アルファベットやハングルなど日本語以外の文字を始め、数字、記号なども含むものであるとする。
【００５７】
読み上げ時間計算／読み上げ用データ生成部２４により計算された読み上げ時間長の情報は、ＣＰＵ５に対して供給される。また、読み上げ時間計算／読み上げ用データ生成部２４により生成された読み上げ用データとしてもＣＰＵ５に供給される。
【００５８】
また、この図９に示す編集装置２１においては、ＲＯＭ４に対し、先の図１の場合に格納されていたプログラム４ａに代えて、図示するようにして編集装置側プログラム２２が格納される。この編集装置側プログラム２２は、後述する第２の実施の形態としての動作を実現するために行われるべき処理動作（図２０〜図２３）をＣＰＵ５に実行させるためのプログラムである。
【００５９】
なお、この図９においては、編集装置２１と外部機器（特にパーソナルコンピュータ３１）との間でデータ通信を行うための通信インタフェースとしてＵＳＢインタフェースを採用するものとしたが、このような編集装置２１とパーソナルコンピュータ３１との間の通信インタフェースとしては、例えばＩＥＥＥ(the Institute of Electrical and Electronic Engineers)１３９４などの他のインタフェースとすることもできる。或いは有線による通信以外にも、例えばBluetooth（登録商標）などの無線通信により行うこともできる。
【００６０】
［パーソナルコンピュータの構成］
図１０は、図８に示したパーソナルコンピュータ３１の内部構成を示すブロック図である。
この図１０において、先ずＣＰＵ３２は、起動されたプログラムに基づいてパーソナルコンピュータ３１全体の制御、演算処理を行う。例えばユーザに対する入出力動作、ＨＤＤ４０へのデータファイルの格納や管理情報の作成・更新等を行う。
ＣＰＵ３２は、図示するバス４２を介して各部との間で制御信号やデータのやりとりを行うようにされる。
【００６１】
メモリ部３３は、ＣＰＵ３２が処理に用いるＲＯＭ、ＲＡＭ、フラッシュメモリなどを包括的に示している。
メモリ部３３におけるＲＯＭには、ＣＰＵ３２の動作プログラム、プログラムローダー等が記憶される。また、メモリ部３３におけるフラッシュメモリには、各種演算係数、プログラムで用いるパラメータ等が記憶される。
さらに、メモリ部３３におけるＲＡＭには、プログラムを実行する上でのデータ領域、タスク領域が一時的に確保される。
【００６２】
ＵＳＢインタフェース４１は、図示するＵＳＢ端子Ｔusbに接続されたＵＳＢケーブルを介して接続された外部機器（この場合は編集装置２１）との間でデータ通信を行うために備えられる。
【００６３】
ＨＤＤ４０においては、上述のようにしてＣＰＵ３２の制御に基づきデータファイルの格納や管理情報の作成・更新等が行われる。例えば、後述するメディアドライブ３９により所要のメディアから取り込んだデータをこのＨＤＤ４０に格納することができる。
また、ＨＤＤ４０に対しては、パーソナルコンピュータ３１が各種の機能を実現するためのプログラム（アプリケーション）を格納することができる。特に、本実施の形態の場合、後述する実施の形態としての動作を実現するための処理動作（図２０）をＣＰＵ３２に実行させるためのＰＣ側プログラム４０ａが格納される。
【００６４】
入力部３５は、パーソナルコンピュータ３１に備えられる図示しないキーボードやマウス、或いはリモートコマンダー、その他の入力デバイスであって、ユーザが各種操作入力やデータ入力を行う。入力部３５で入力された情報は入力処理部３４で所定の処理が施され、ＣＰＵ３２に対して操作又はデータの入力として伝達される。ＣＰＵ３２は入力された情報に対応して必要な演算や制御を行う。
【００６５】
メディアドライブ３９は、例えばＣＤ（Compact Disc）、ＭＤ(Mini Disc：光磁気ディスク)、ＣＤ−Ｒ(Recordable)、ＣＤ−ＲＷ（ReWritable）、ＤＶＤ(Digital Versatile Disc)、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、Blu-ray Discなどの光ディスク記録媒体、またはメモリーカード（リムーバブルメディアとしての半導体メモリ装置）等の記録媒体（メディア）に対応するドライブ機能部であり、これらメディアについての記録再生動作を行うことが可能に構成される。例えばメディアとして、光ディスク記録媒体に対応する場合、このメディアドライブ２９には、例えば光学ヘッド、スピンドルモータ、再生信号処理部、サーボ回路等が備えられるものとなる。
【００６６】
ドライブ制御部３８は、メディアドライブ３９に装填されたメディアについての記録再生動作、アクセス動作等を制御する。例えばユーザが入力部３５を介して装填されたメディアに対する再生操作を行った場合、ＣＰＵ３２はドライブ制御部３８にメディアの再生を指示する。するとドライブ制御部３８は、メディアドライブ３９に対してアクセス動作や再生動作を実行させるための制御を行う。メディアドライブ３９は、読み出した再生データをドライブ制御部３８に転送し、バス４２に送出する。
【００６７】
ディスプレイ３７は、例えば液晶パネルなどの表示デバイスとされ、ユーザに対して各種情報表示を行う。
例えば、ＣＰＵ３２が各種動作状態や入力状態、通信状態に応じて表示情報を表示処理部３６に供給すると、表示処理部３６は供給された表示データに基づいてディスプレイ３７を駆動して表示動作を実行させる。
また、上記したメディアドライブ３９に装填されたメディアから、或いはＨＤＤ４０から映像データが再生された場合には、表示処理部３６がこの再生データに基づいてディスプレイ３７を駆動することにより映像表示を行わせる。
【００６８】
［第２の実施の形態としての動作］
ここで、放送コンテンツとして、例えばニュース番組で放送されるべきニュースコンテンツを制作するにあたっては、取材前の段階で予め何分何秒の時間枠でどのような内容を伝えるかが決まっていることが多い。従って、取材現場に赴いた記者やカメラマン等は、そのような取材計画に沿って映像の撮影・ナレーション原稿の作成を行うようにされる。
【００６９】
また、このようなニュースコンテンツの制作としては、例えば緊急性を有するニュースである場合等は特に、ポータブルタイプの編集装置２１を用いて取材現場にて行われることもある。具体的には、編集装置２１に対し、撮影映像を入力すると共に、上記のようにして取材計画に従って作成した原稿を読み上げてナレーション音声を録音した上で、これら映像と音声とを合成してニュースコンテンツを制作するといったものである。
【００７０】
このとき、ニュースコンテンツとしては、上述のように予め定められた所定の時間枠に収まるように制作されるものであって、それを構成する映像・ナレーション音声としても、その時間枠内に収まるように生成される必要がある。つまり、映像であれば、撮影映像（素材映像）を所定時間に収まるように編集する。また、ナレーション音声については、その時間内に収まるように原稿を読み上げる必要がある。
【００７１】
しかしながら、このようにしてナレーションを時間内に収まるように読み上げるのは、アナウンサーなど専門職の人物が行うのは比較的容易であるといえるが、上述したように現場においてナレーションを入力する場合を想定した場合においては例えば記者やカメラマンなどがこれを行う必要があり、非常に困難となることが予想される。
【００７２】
このようなことより、特に取材現場等に持ち出されてニュースコンテンツの制作を行う場合においては、例えば記者やカメラマン等、原稿読み上げに不慣れであると考えられる人物であっても容易に時間内に原稿を読み上げることが可能となるようにすることが要請される。
【００７３】
第２の実施の形態の編集システム２０としては、このような原稿読み上げ（すなわちナレーション音声の録音）についての支援動作が可能となるようにも構成される。
以下、図１１〜図１９を参照して、第２の実施の形態の編集システム２０により実現される動作について説明していく。
【００７４】
先ず、図１１は、第２の実施の形態の編集システム２０の動作を模式的に示す図として、特にニュース原稿としてのテキストデータの入力から読み上げ用データの生成までの動作について模式的に示している。
図１１において、第２の実施の形態の編集システム２０では、先ずは図中＜１＞と示すようにして、パーソナルコンピュータ３１側にてテキストデータと制限時間の入力のための動作を行うようにされる。具体的には、図１０に示したディスプレイ３７上にこれらテキストデータと制限時間とを入力するための画面表示を行い、ユーザはその画面に対して入力部３５に設けられるマウスやキーボードを駆使してテキストデータの入力と制限時間の入力とを行うようにされる。
この場合、上記制限時間としては、ナレーションを読み上げる際の制限時間長を入力することになる。通常は、取材計画によりナレーションの読み上げ時間長が決定しているので、その時間長を入力することになる。
【００７５】
パーソナルコンピュータ３１側では、このようにして入力されたテキストデータと制限時間長の情報とを、ＵＳＢケーブルを介して接続された編集装置２１に対して送信するようにされる（図中＜２＞）。
【００７６】
編集装置２１側では、このようなパーソナルコンピュータ３１側からのテキストデータと制限時間長の情報とが受信されると、先ずは＜３＞と示すようにして読み上げ時間の計算を行うようにされる。すなわち、図９に示した読み上げ時間計算／読み上げ用データ生成部２４により、受信されたテキストデータについての読み上げ時間長を計算するようにされる。
【００７７】
そして、読み上げ時間が計算されると、ＣＰＵ５が、その時間長が受信された制限時間長の範囲内であるか否かを判別するようにされる（図中＜４＞）。
制限時間をオーバーしているとされた場合は、パーソナルコンピュータ３１側に対して修正指示を行うようにされる（図中＜５＞）。
【００７８】
この修正指示に応じパーソナルコンピュータ３１側では、＜６＞と示すようにテキスト修正後、それを再び編集装置２１側に送信するための動作を行うようにされる。具体的には、ディスプレイ３７上に例えば「制限時間をオーバーしています」等のエラーメッセージの表示を行った後、入力されたテキストデータの修正操作を受け付ける。そして、修正後のテキストデータを確定する（決定する）操作が行われたことに応じ、その修正後のテキストデータを編集装置２１側に再度送信する。
【００７９】
編集装置２１側では、このようにパーソナルコンピュータ３１側から再度送信されたテキストデータが受信された場合も、再度先の＜３＞＜４＞の動作により、そのテキストデータの読み上げ時間が制限時間内であるか否かを判別するようにされる。そして、制限時間内でない場合は、同様に先の＜５＞の動作が行われ、これによって制限時間内となるまでテキストデータの修正を繰り返すようにされる。
【００８０】
一方、受信されたテキストデータが制限時間内である場合には、＜７＞と示すようにして、指示に応じて読み上げ用データを生成する。つまり、読み上げ時間計算／読み上げ用データ生成部２４が、受信されたテキストデータの各文字ごとに、予め定められた所定の読み上げ速度に基づくテキストタイムコードを付すことによって、読み上げ用データを生成するようにされる。
【００８１】
このように読み上げ用データが生成された以降、編集システム２０では、当該読み上げ用データに基づきナレーション音声の録音を支援するための動作を行うようにされる。
このような録音支援動作について、図１２〜図１５を参照して説明する。
【００８２】
図１２〜図１５は、録音支援動作時に対応して表示部１３上に表示されるべき録音画面の例を示している。
先ず、図１２では、録音開始前における録音画面の様子を示している。この録音画面には、図示するようにしてテキストデータ表示領域Ａ１、テキストタイムコード表示領域Ａ２、制限時間表示領域Ａ３、duration time表示領域Ａ４が設けられている。
【００８３】
テキスト表示領域Ａ１は、パーソナルコンピュータ３１側で入力され編集装置２１側に受信されたテキストデータの内容を表示するための領域である。なお、このテキスト表示領域Ａ１では、入力テキストの全文字が入り切らない場合、表示できる範囲内で文字を表示しておくようにされる。その場合、続きの文字列については、後述するようにしてスクロールを行うことで順次表示していくことができる。
【００８４】
また、テキストタイムコード表示領域Ａ２は、テキストタイムコードに基づく時間情報を表示するための領域であり、制限時間表示領域Ａ３は入力された制限時間情報を表示するための領域である。また、duration time表示領域Ａ４は、録音後において、duration timeとしての実際に録音した音声の時間長の情報を表示するための領域とされる。
【００８５】
編集装置２１においては、このような録音画面を、先の図１２の＜７＞に示したように入力テキストデータを確定する操作が行われて読み上げ用データを生成したことに応じて、自動的に表示するようにされる。
【００８６】
この録音画面が表示部１３上に表示された状態において、ナレーション音声の録音が行われる。
具体的に、編集装置２１はこのような録音画面の表示状態において、図９に示した操作部８からの操作入力として録音開始を指示する所定の操作入力が得られたことに応じ、音声入力端子ＴAinからの入力音声についての録音（記録）動作を開始するようにされる。
【００８７】
そして、これと同時に編集装置２１は、次の図１３に示されるようにして、テキスト表示領域Ａ１に表示される文字上に重畳するようにして表示したインテンド棒ＩＢにより、現在読み上げるべき文字位置を指示する動作を開始するようにされる。
具体的には、読み上げ用データのテキストタイムコードにより示される各文字の読み上げタイミングに基づき、テキスト表示領域Ａ１にて表示される各文字が順次インテンドされるように、インテンド棒ＩＢを徐々に図中矢印方向に延ばしていく動作を行うようにされる。
このような動作により、時間経過に伴ってインテンド棒ＩＢが表示文字列上を徐々に進んでいくことになる。
【００８８】
ここで、テキスト表示領域Ａ１にて入力テキストデータの全文字を表示できない場合は、先ずは表示できる範囲内のテキストデータを表示しておくことを先に述べたが、その続きの文字列については、次の図１４及び図１５に示されるようにして、テキスト表示領域Ａ１に表示される文字列全体を図中のスクロール方向にスクロールさせることによって順次表示していくようにされる。
このとき、当然のことではあるが読み上げるべき文字がテキスト表示領域Ａ１内に表示されていなければ、原稿の読み上げを適正に支援することができなくなるので、スクロールとしては読み上げるべき文字が常に表示された状態にあるようにして行われる必要がある。この場合、現在読み上げるべき文字位置は読み上げ用データのテキストタイムコードにより把握することができるので、スクロール動作としてもこのテキストタイムコードの情報に基づき行うようにする。具体的には、現在のタイミングを示すテキストタイムコードが付された文字がテキスト表示領域内に表示された状態にあるようにしてスクロールの実行タイミングを制御する。これにより、読み上げるべき文字が常に表示された状態にあるようにして続きの文字列を順次表示していくことができる。
【００８９】
ここで、上記のようにしてナレーション音声の録音時には、所定の読み上げ速度で原稿を読んだときの読み上げ位置がインテンド棒ＩＢによって順次指示される。このことで、ユーザはその読み上げ位置に従って表示文字列を読み上げることによって、容易に所定の制限時間内に所定の読み上げ速度で原稿を読み上げることができる。
この結果、第２の実施の形態の編集システム２０によれば、例えば取材記者やカメラマンなどとった原稿読み上げに不慣れであることが想定される人物がナレーション音声を録音するといったときも、容易に制限時間内に原稿を読み上げることができるように支援することができる。
【００９０】
続いて、このような録音支援動作に基づき表示文字を全て読み上げて録音を停止するとしたとき、ユーザは、例えば操作部８に設けられた停止キーなどの所定操作を行って録音停止指示を行うことができる。
【００９１】
編集装置２１では、このような録音停止指示に基づき、先ずは入力音声の記録動作を停止するようにされる。
なお、図示は省略したが、録音停止に応じては、録音画面におけるduration time表示領域Ａ４に対して、実際に録音された音声データの時間長の情報を表示するようにされる。
【００９２】
そして、このように録音停止により音声データが得られたことに応じては、この場合も音声サムネイル画像を生成するようにされる。
この場合の音声サムネイル画像としては、上述のようにしてナレーション原稿として入力されたテキストデータの一部を含むようにして生成するもとしている。
具体的には、次の図１６に示すようにして、入力テキストデータの先頭部分の所定数の文字が含まれるようにして、音声サムネイル画像を生成するようにされる。また、この場合も、音声サムネイル画像としては、図示するようにして音声データであることを示すマークとしての、マイクのマークも示されるようにし、さらにはｔａｋｅ数の情報も含まれるようにしている。
【００９３】
この場合、ＣＰＵ５は、パーソナルコンピュータ３１側から入力されたテキストデータと、ｔａｋｅ数の情報（この場合は初回録音時であるのでｔａｋｅ１となる）とをキャラクタ発生器１１に供給して、図１６に示すような構成による音声サムネイル画像を生成させる。
【００９４】
このようにして音声サムネイル画像の生成を行うと、この場合も録音された音声データとの対応づけを行うようにされる。すなわち、この場合もＣＰＵ５は、キャラクタ発生器１１により生成された音声サムネイル画像を不揮発性メモリ７に記録すると共に、当該音声サムネイル画像が同じく不揮発性メモリ７に記録された録音音声データと対応づけられるように管理情報を生成する。この場合も管理情報は、例えば不揮発性メモリ７に記録しておくようにされる。
【００９５】
上記動作により、音声データの録音と、録音音声データに対する音声サムネイル画像の対応づけが完了することになる。そして、第２の実施の形態の編集装置２１では、このような録音・音声サムネイル画像との対応づけが完了したこと応じ、録音音声データについてのプレビュー再生を行うようにされる。
このプレビュー再生としては、上記録音動作により得られた音声データを先頭から再生し、これを図９に示したスピーカＳＰから音声出力する。さらにこの場合は、このような録音音声についての再生出力と同期して、表示部１３上に録音時の表示と同様のテキストインテンド表示を行うようにされる。なお、このようなプレビュー再生時における表示部１３上の画面遷移としては、先の図１３〜図１５に示した画面遷移と同様となるので、ここでの改めての説明は省略する。
【００９６】
プレビュー再生が終了すると、音声の修正の受付のための動作を行う。
図１７（ａ）〜（ｃ）は、このような修正受け付け時に対応して表示部１３に表示される画面の遷移例を示している。
先ず、プレビュー再生を終了すると、編集装置２１は、表示部１３に図１７（ａ）に示す修正受け付け画面の表示を行うようにされる。この修正受け付け画面としては、図示するようにして例えば「修正しますか？」等の質問メッセージと共に、Ｙｅｓ／Ｎｏの項目を示すアイコンと、それらを選択するためのカーソルＣＲが表示される。
【００９７】
この修正受け付け画面において、ユーザは操作部８に設けられた方向キーなどの所定操作を行うことによってカーソルＣＲを移動させることができ、これによってＹｅｓ／Ｎｏを選択することができる。そして、操作部８に設けられる決定キーなどの所定キーの操作によってカーソルＣＲにより選択した項目を決定することができる。
【００９８】
上記修正受け付け画面において、Ｙｅｓの項目が決定されて修正を行うことが確定された場合には、次に説明する時間軸圧縮／伸張受け付け画面を表示するようにされる。
また、Ｎｏが決定されて修正を行わないことが確定された場合は、編集画面の表示を行うようにされる。なお、この場合に表示されるべき編集画面については後述する。
【００９９】
図１７（ｂ）は、上記時間軸圧縮／伸張受け付け画面の例を示している。
この時間軸圧縮／伸張受け付け画面としても、例えば「時間軸圧縮／伸張？」等の質問メッセージと共に、Ｙｅｓ／Ｎｏの項目を示すアイコンとそれらを選択するためのカーソルＣＲが表示される。この場合もユーザは、例えば操作部８の方向キーなどの所定操作を行うことによってカーソルＣＲを移動させてＹｅｓ／Ｎｏの項目を選択することができ、また操作部８の決定キーなど所定操作によって選択した項目を決定することができる。
【０１００】
時間軸圧縮／伸張受け付け画面において、Ｙｅｓの項目が決定されて時間軸圧縮／伸張処理を行うことが選択された場合には、録音した音声データについての時間軸圧縮／伸張処理を行った後、処理後の音声データに基づくプレビュー再生を行うようにされる。
【０１０１】
具体的に、このように時間軸圧縮／伸張受け付け画面にてＹｅｓの項目が選択された場合は、図示による説明は省略するが、表示部１３上に目標時間長の情報入力画面を表示し、圧縮／伸張の目標時間長の入力操作の受け付けを行うようにされる。そして、入力された時間情報を確定（決定）する操作が行われたことに応じ、図９に示した信号処理部３によって、録音された音声データの時間長がその確定された時間長となるように時間軸圧縮／伸張処理を行うようされる。
【０１０２】
ここで、このように時間軸圧縮／伸張処理や、後述する録り直しにより新たに生成された音声データについては、初回録音時に得られた音声データとは別の音声データとして扱うようにされる。つまり、新たに得られた音声データを初回録音時に得られた音声データに対して上書き保存しないものとしている。
これに伴い、新たに得られた音声データについては、初回録音時に生成した音声サムネイル画像とは別の新たな音声サムネイル画像を生成した上で、この新たな音声サムネイル画像を対応づけるようにする。具体的にこの場合は、初回録音時に生成した音声サムネイル画像は「ｔａｋｅ１」の内容を示すものとしているので、新たな音声サムネイル画像としては、修正回数に応じたｔａｋｅ数を示すものを生成するようにされる。
【０１０３】
このようにして時間軸圧縮／伸張処理により新たな音声データを生成すると、これを不揮発性メモリ７に記録した後、プレビュー再生を行うようにされる。
ここで、この場合のプレビュー再生としても、先に述べた初回のプレビュー再生時と同様に入力テキストをインテンド表示しつつ行うが、この場合は音声データが時間軸方向に圧縮／伸張されているので、そのままでは文字のインテンドタイミングと再生音声による文字の発語のタイミングとにズレが生じる可能性がある。
そこで、時間軸圧縮／伸張処理後のプレビュー再生を行うのに先だっては、録音前に入力された元の目標時間長（制限時間長）と、圧縮／伸張処理の目標時間長として入力された圧縮／伸張目標時間長との比に応じて、読み上げ用データにおけるテキストタイムコードを修正する動作を行う。そして、この場合のプレビュー再生としては、このように修正されたテキストタイムコードが示すタイミングで各文字をインテンド表示するもとする。
このようにすることで、音声データ側が時間軸圧縮／伸張されたことに対応させて、プレビュー再生時の各文字のインテンドタイミングを同期させることができる。
【０１０４】
なお、確認のために述べておくと、この場合のプレビュー再生時における表示部１３上の画面遷移としても、先の図１３〜図１５に示した画面遷移と同様となるので、ここでの改めての説明は省略する。
【０１０５】
このような時間軸圧縮／伸張処理によれば、ユーザは目標の時間長を設定することで、改めて原稿の読み上げを行うことなく制限時間内のナレーション音声を作成することができる。すなわち、このような時間軸圧縮／伸張処理が可能とされることで、制限時間内のナレーション音声の作成がさらに容易となるように支援することができる。
【０１０６】
また、図１７（ｂ）に示す時間軸圧縮／伸張受け付け画面において、Ｎｏの項目が決定されて時間軸圧縮／伸張処理を行わないことが選択された場合は、次の図１７（ｃ）に示す部分指定受け付け画面を表示するようにされる。
【０１０７】
図１７（ｃ）において、この部分指定受け付け画面においても、例えば「部分指定しますか？」等の質問メッセージと共にＹｅｓ／Ｎｏの項目を示すアイコンとそれらを選択するためのカーソルＣＲが表示される。この場合もユーザは、例えば操作部８の方向キーなどの所定操作を行うことによってカーソルＣＲを移動させてＹｅｓ／Ｎｏの項目を選択することができ、また操作部８の決定キーなど所定操作によって選択した項目を決定することができる。
【０１０８】
部分指定受け付け画面においてＮｏの項目が選択・決定された場合には、初めからナレーション音声を録り直すための動作を行った後に、その録り直し音声に基づくプレビュー再生を行うようにされる。
この場合、初めからの録り直し動作としては、初回録音時と同様の動作を行うようにされる。つまり、先の図１２に示した録音画面を表示部１３上に再度表示し、録音開始指示に応じて再度録音動作と図１３〜図１５の画面遷移として示したようなテキストインテンド表示動作とを開始するようにされる。そして、録音停止指示に応じて録音動作を停止するようにされる。
この場合も録音音声データが得られたことに応じては、新たな音声サムネイル画像を生成して音声データとの対応づけを行うようにされる。
【０１０９】
その上で、録り直し動作により得られた音声データについても、プレビュー再生を行うようにされる。この場合のプレビュー再生としても、初回のプレビュー再生時と同様に入力テキストをインテンド表示しつつ行うものであり、その場合の表示部１３上の画面遷移は先の図１３〜図１５に示した画面遷移と同様となる。
【０１１０】
また、図１７（ｃ）に示す部分指定受け付け画面において、Ｙｅｓの項目が選択・決定されて部分指定するとの選択が行われた場合は、次の図１８（ａ）に示す部分指定画面を表示部１３上に表示して、部分指定操作の受け付けを行うようにされる。
【０１１１】
図１８（ａ）において、この部分指定画面としては、先の図１２に示した録音画面と同様にテキスト表示領域Ａ１、テキストタイムコード表示領域Ａ２、制限時間表示領域Ａ３、duration time表示領域Ａ４の各領域が設けられる。
但し、この部分指定画面では、テキスト表示領域Ａ１内において、録り直し部分の範囲指定を行うためのカーソルＣＲが表示されている。
【０１１２】
この部分指定画面について、ユーザは操作部８に設けられる例えば方向キーを操作することで、テキスト表示領域Ａ１内に表示されるテキストデータの１文字単位で、カーソルＣＲの位置を移動させることができる。そして、例えば操作部８における別の所定キーを押しながら、上記方向キーによるカーソルＣＲの移動操作を行うことで、次の図１８（ｂ）に示されるようにして、範囲指定バーＳＢにより文字列の選択を行うことができる。さらに、上記所定キーの押圧操作をやめることで、この範囲指定バーＳＢにより選択した範囲を確定することができる。
【０１１３】
このようにして録り直す部分の範囲指定が行われたことに応じて、編集装置２１では、この範囲指定された部分についての録り直しのための動作を行う。
図示による説明は省略するが、この場合の録り直しのための動作としては、例えば図１８と同様にテキスト表示領域Ａ１、テキストタイムコード表示領域Ａ２、制限時間表示領域Ａ３、duration time表示領域Ａ４の各領域が設けられた画面を表示し、そのテキスト表示領域Ａ１には、少なくとも範囲指定された文字列を表示するようにされる。
そして、その状態において、録音開始指示が行われたことに応じて、録音動作を開始すると共に、テキスト表示領域Ａ１に表示される上記範囲指定された部分の先頭からの文字のインテンド表示を開始する。この場合、インテンド表示は、指定範囲の最後の文字を覆ったところで終了する。また、録音動作としても同タイミングで停止するようにされる。
【０１１４】
このようにして、指定部分についての録り直し音声データが得られることになる。そして、録り直し音声データが得られたことに応じては、先ずはその録り直し部分についてのプレビュー再生を行うようにされる。すなわち、録り直し音声データについての再生出力を行うと共に、表示部１３上には、上述した指定範囲の録り直し動作時と同様の画面表示（範囲指定された文字列のインテンド表示）を行うようにされる。
【０１１５】
そして、この場合もプレビュー再生後には、修正を受け付けるための修正受け付け画面を表示する。その表示内容は先の図１７（ａ）と同様とされる。この場合において表示される修正受け付け画面にてＹｅｓが決定された場合は、上述した指定部分の録り直し動作と同様の動作を行って、指定部分についての再度の録り直し音声を得るようにされる。
そしてその後は、この録り直し部分についての再度のプレビュー再生を行い、このプレビュー再生の終了後には、再度、録り直し部分についての修正を受け付けるための修正受け付け画面を表示する。このような動作によって、プレビュー再生後の修正受け付け画面でＮｏが決定されて録り直し部分の音声データが確定されるまで、指定部分の録り直しができるようにされている。
【０１１６】
一方、録り直し部分についてのプレビュー再生後、上記のような録り直し部分についての修正受け付け画面にてＮｏが決定され、録り直し音声データが確定された場合は、この録り直しにより得られた指定部分の音声データを、元の音声データの該当部分の音声データと入れ替えて、新たな音声データを生成するようにされる。
【０１１７】
ここで、先の説明によれば、この場合の範囲指定はテキストデータ側の範囲を指定するものであって、音声データ側の範囲が直接的に指定されるものではない。
しかし、この場合の編集装置２１としても、音声録音時には、ＣＰＵ５が録音音声に対して音声タイムコードを付すようにされている。つまり、この音声タイムコードに基づき、範囲指定された部分のテキストタイムコードから音声データ側の該当するデータ部分を特定することができる。具体的には、範囲指定された部分の開始文字位置のテキストタイムコードと終了文字位置のテキストタイムコードとの値により時間軸上の範囲を特定する。そして、音声タイムコードに基づき、音声データ中のこの特定された時間軸上の範囲に該当するデータ部分を特定する。このようにして、テキストデータ側で指定された範囲に該当する音声データ部分を特定することができる。
【０１１８】
このようにして録り直し音声データを、元の音声データの該当する部分に入れ替えて新たな音声データを生成すると、この新たな音声データについての音声サムネイル画像を生成し、これをその音声データと対応づけるようにされる。
そしてその上で、この新たな音声データの全体についてプレビュー再生を行う。この場合のプレビュー再生も、表示部１３上の画面遷移は先の図１３〜図１５に示した画面遷移と同様となる。
【０１１９】
なお、図示による説明は省略したが、このような指定部分を入れ替えて生成した音声データについてのプレビュー再生後のタイミングをはじめとして、先に述べた時間軸圧縮／伸張処理を行った後のプレビュー再生後、及び初めから録り直し後のプレビュー再生後には、それぞれ再度の修正の受け付けが可能となるように、先の図１７（ａ）に示した修正受け付け画面を表示する。
これにより、当該修正受け付け画面にてＮｏが決定されて修正後の音声データが確定されるまでは、修正を受け付けることができるようにされている。
【０１２０】
そして、このような図１７（ａ）に示した、修正受け付けのための修正受け付け画面において、Ｎｏの項目が選択・決定された場合には、次の図１９に示すような編集画面を表示部１３上に表示する。
この場合も編集画面としては、光ディスクＤに記録された映像データについての映像サムネイル画像と、録音された音声データについての音声サムネイル画像とを表示するようにされる。また、これらサムネイル画像（つまりサムネイル画像と対応づけられたデータ）を対象として指定するためのカーソルＣＲも表示される。
この図１９では、録り直しや時間軸圧縮／伸張処理が行われたことによって２つの音声データが得られている場合に対応して、音声サムネイル画像としては「ｔａｋｅ１」と「ｔａｋｅ２」との２つが表示されている場合を例示している。
【０１２１】
このような編集画面の表示のために、ＣＰＵ５は、予めディスクドライブ２により光ディスクＤに記録された映像データ中の所定の一部の画像データ（この場合も例えば先頭のフレーム画像データ）を再生させ、その画像データに基づき映像サムネイル画像を生成しておくようにされる。また、これら映像サムネイル画像とその生成の基とした映像データとの対応づけも行っておくようにされる。なお、これら映像サムネイル画像としても、予め不揮発性メモリ７に記録しておくようにされていればよい。
そして、上記編集画面の表示にあたっては、不揮発性メモリ７に記録された音声サムネイル画像とこれら映像サムネイル画像とを読み出すと共に、それらをキャラクタ発生器１１に供給して表示部１３上に表示させる。
【０１２２】
上記により説明したようにして第２の実施の形態によっても、編集画面上にて音声データを表す音声サムネイル画像として、音声データであることを表すマークが示されるようにすることができる。これにより、この場合も当該サムネイル画像が映像データのサムネイル画像であるか音声データのサムネイル画像であるかの区別を直感的に行うことが可能となるようにすることができ、その分、編集時の作業効率を向上させることができる。
【０１２３】
その上で第２の実施の形態では、ナレーション音声の読み上げ用に入力されたテキストデータの一部も、音声サムネイル画像に示されるようにしている。これによれば、音声データの内容に関する情報も表すことができ、これによって各音声データの区別の際にも逐次サムネイル画像を指定して対応するデータの再生を実行させて内容確認を行うといった手間が省かれる。すなわち、この点でも編集時の作業効率を向上させることができる。
【０１２４】
またこの際、音声サムネイル画像上で表されるテキストデータの一部は、あくまで読み上げ用として入力されたものを流用しているものであって、音声データの内容を示すために別途入力されたものではない。つまりは、第２の実施の形態によれば、音声サムネイル画像に音声データの内容を示す情報を含ませるにあたり、別途のテキストデータの入力の手間が省かれるようにすることができる。
【０１２５】
［処理動作］
続いては、図２０〜図２３のフローチャートを参照して、上記により説明した第２の実施の形態の編集システム２０による動作を実現するために行われるべき処理動作について説明する。
これら図２０〜図２３において、パーソナルコンピュータとして示される処理動作は、先の図１０に示したＣＰＵ３２がＨＤＤ４０に格納されるＰＣ側プログラ４０ａに基づいて実行するものである。また、編集装置として示される処理動作は、図９に示したＣＰＵ５がＲＯＭ４内に格納される編集装置側プログラム２２に基づいて実行するものである。
なお、図２０においては、既に編集装置２１とパーソナルコンピュータ３１とがデータ通信可能な状態に接続されている状態にあるとする。また、編集装置２１には、映像データが記録された光ディスクＤが装填された状態にあるとする。
【０１２６】
図２０は、制限時間・テキストデータの入力から読み上げ用データの生成までの動作（先の図１１参照）時に対応して行われるべき処理動作について示している。
図２０において、先ずパーソナルコンピュータ３１側では、図示するステップＳ２０１により、制限時間長の入力処理を実行するようにされる。
具体的にこの場合は、先に説明したようにしてディスプレイ３７上にテキストデータと制限時間とを入力するための画面表示を行い、その画面上で入力部３５に設けられるマウスやキーボードによる制限時間長の入力及びテキストデータの入力を受け付けるようにされる。
ステップＳ２０１としては、このようにディスプレイ３７上に表示した画面上にて、先ずは制限時間の入力操作を受け付け、さらに操作入力された時間長の情報を画面上の所定領域に表示させる処理を実行するものとなる。
【０１２７】
続くステップＳ２０２では、決定操作が行われたか否かについて判別処理を行う。この場合、決定操作は、画面上に表示した決定ボタン（アイコン）により行われるものとされる。すなわちこのステップＳ２０２では、画面上のこの決定ボタンが同じく画面上に表示したカーソルにより選択された状態で、マウスの例えば左クリック操作等の所定操作が行われた否かを判別するようにされる。
このような決定操作が行われずに否定結果が得られた場合は、図示するようにしてステップＳ２０１に戻り引き続き制限時間長の入力処理を行うようにされる。
また、決定操作が行われたとして肯定結果が得られた場合は、ステップＳ２０３に進むようにされる。
【０１２８】
ステップＳ２０３では、テキスト入力処理を実行する。すなわち、上述した入力画面において、入力部３５のマウス・キーボードの操作に応じたテキストデータを表示させるための処理を行うようにされる。
そして、続くステップＳ２０４では、決定操作が行われたか否かについて判別処理を行うようにされる。この場合も決定操作としては、上記入力画面上に表示される決定ボタンにより行われるものとされ、従ってこのステップＳ２０４としても、上記したカーソルにより決定ボタンが選択された状態での所定操作が行われたか否かを判別するようにされる。
そして、決定操作が行われない場合は、図示するようにしてステップＳ２０３にて引き続きテキストデータの入力処理を行うようにされる。
一方、決定操作行われて肯定結果が得られた場合は、ステップＳ２０５に進むようにされる。
【０１２９】
ステップＳ２０５では、制限時間長及びテキストを編集装置２１側に送信するための処理を実行する。すなわち、上記のようにして入力・決定された制限時間長の情報とテキストデータとが、ＵＳＢ端子Ｔusbを介して接続された編集装置２１側に対して送信されるように、ＵＳＢインタフェース４１に対する制御を行う。
【０１３０】
編集装置２１側では、これら制限時間長の情報とテキストデータとの受信をステップＳ３０１にて待機している。そして、これらが受信された場合には、ステップＳ３０２において、テキストの読み上げ時間計算のための処理を実行する。つまり、受信されたテキストデータを図９に示した読み上げ時間計算／読み上げ用データ生成部２４に対して供給すると共に、その読み上げ時間長を計算するように指示を行う。これに応じ時間計算／読み上げ用データ生成部２４は入力テキストデータについての読み上げ時間長を計算し、その結果をＣＰＵ５に対して供給するようにされる。
【０１３１】
続くステップＳ３０３では、制限時間内か否かについての判別処理を行うようにされる。すなわち、上記のようにして読み上げ時間計算／読み上げ用データ生成部２４により計算された読み上げ時間長の値が、受信された制限時間長の値以下となっているか否かについて判別処理を行うようにされる。
【０１３２】
ステップＳ３０４において、計算された読み上げ時間長の値が受信された制限時間長の値以下となってはおらず、制限時間内ではないとして否定結果が得られた場合は、ステップＳ３０４に進んでパーソナルコンピュータ３１側に対してエラー通知を行った後、図示するように「RETURN」となる。
また、ステップＳ３０４において、計算された読み上げ時間長の値が受信された制限時間長の値以下となっており、制限時間内であるとして肯定結果が得られた場合は、ステップＳ３０５に進むようにされる。
【０１３３】
ステップＳ３０５では、入力テキストデータを確定するか否かについて判別処理を行う。
このステップＳ３０５の判別処理としては、表示部１３上にテキストデータを確定するか否かを問うためのメッセージと、Ｙｅｓ／Ｎｏのアイコン、及びそれらを選択するためのカーソルＣＲとを少なくとも含んで構成された画面を表示して行う。つまり、この表示画面上にてＮｏのアイコンがカーソルＣＲにより選択・決定されて、入力テキストを確定しないとの否定結果が得られた場合は、ステップＳ３０６に進み、パーソナルコンピュータ３１側に対して再入力通知を行う。そしてその後、図示するように「RETURN」となる。
また、ステップＳ３０５において、上記表示画面上にてＹｅｓのアイコンがカーソルＣＲにより選択・決定されて、入力テキストを確定しないとの否定結果が得られた場合は、ステップＳ３０７に進んでパーソナルコンピュータ３１側に対して確定通知を行うようにされる。
【０１３４】
ここで、パーソナルコンピュータ３１側では、上述した制限時間長・テキストの送信処理（Ｓ２０５）の実行後、編集装置２１側からの上記エラー通知、再入力通知、確定通知の何れかの通知を、ステップＳ２０６にて待機するようにされている。
そして、このステップＳ２０６にて何れかの通知があった場合は、ステップＳ２０７において、先ずは当該通知がエラー通知であったか否かの判別処理を行うようにされる。エラー通知であるとして肯定結果が得られた場合は、ステップＳ２０９に進んでエラー表示処理を行う。すなわち、先の図１１においても説明したように、ディスプレイ３７上に例えば「制限時間をオーバーしています」等のエラーメッセージを表示させるための処理を実行するようにされる。そしてその後、図示するようにしてステップＳ２０３に戻るようにされ、これによってテキストデータの再入力（修正）を受け付けるようにされる。
なお、修正後のテキストデータは再度ステップＳ２０５の処理によって編集装置２１側に送信され、編集装置２１側ではステップＳ３０３にて再度修正後のテキストの読み上げ時間長が制限時間内であるか否かについての判別処理が再度行われることになる。このような流れにより、制限時間内となるまでテキストの修正を行うことができるようにされている。
【０１３５】
また、ステップＳ２０７において、編集装置２１側からの通知がエラー通知ではないとして否定結果が得られた場合は、ステップＳ２０８において、再入力通知であるか否かについての判別処理を行うようにされる。再入力通知であるとして肯定結果が得られた場合は、ステップＳ２０３に戻るようにされ、これによってテキストデータの修正を行うことが可能となる。このように制限時間内であってもテキストの修正が可能とされることで、例えば入力テキストの読み上げ時間長が制限時間に対して著しく足りない場合などに対応して、テキストの修正を行うことが可能となる。
【０１３６】
また、ステップＳ２０８において、再入力通知ではないとして否定結果が得られた場合、編集装置２１からの通知は確定通知であることになる。これに応じては、パーソナルコンピュータ３１側における再入力処理はもはや不要となり、図示するようにして処理動作を終了するようにされる。
【０１３７】
説明を編集装置２１側に移す。
先のステップＳ３０７にて確定通知を行うと、図示するようにしてステップＳ３０８に処理を進める。
ステップＳ３０８では、テキストデータを保存するための処理を実行する。すなわち、この場合は図９に示した不揮発性メモリ７に対して受信されたテキストデータを記録するようにされる。
【０１３８】
続くステップＳ３０９では、各文字にテキストタイムコードを付した読み上げ用データを生成するための処理を実行する。すなわち、上記のようにして保存したテキストデータを、読み上げ時間計算／読み上げ用データ生成部２４に対して供給すると共に、当該テキストデータの各文字ごとにテキストタイムコードを付した読み上げ用データを生成するように指示を行う。
読み上げ時間計算／読み上げ用データ生成部２４により生成された読み上げ用データはＣＰＵ５に供給され、ＣＰＵ５は読み上げ用データを例えば不揮発性メモリ７に対して記録するようにされる。
このステップＳ３０９の処理を実行すると、次の図２１に示されるステップＳ３１０に進むようにされる。
【０１３９】
図２１は、主に、先に説明した録音支援動作（図１３〜図１５を参照）時、及び音声サムネイル画像の生成時に対応して編集装置２１側で行われるべき処理動作について示している。
先ず、ステップＳ３１０では、録音画面の表示処理を行うようにされる。すなわち、表示部１３上に、先の図１２に示したような録音前（初期状態）の録音画面を表示させるための処理を実行するようにされる。具体的には、不揮発性メモリ７に記録されるテキストデータ、制限時間長の情報をキャラクタ発生器１１に対して供給し、これらが画面上の所定位置（テキスト表示領域Ａ１、制限時間表示領域Ａ２）にそれぞれ表示されるように指示を行う。
【０１４０】
続くステップＳ３１１では、録音開始指示を待機するようにされる。
このステップＳ３１１において、操作部８からの操作入力として、録音開始を指示する所定の操作入力が得られて録音開始指示があったとされた場合は、ステップＳ３１２に進み録音開始処理を行う。つまり、信号処理部３に対し音声入力端子ＴAinからの入力音声についての増幅・Ａ／Ｄ変換処理を開始させる共に、これにより得られる音声データの不揮発性メモリ７への記録動作を開始するようにされる。
【０１４１】
そして、続くステップＳ３１３では、テキストインテンド表示を開始するための処理を実行するようにされる。
具体的には、読み上げ用データのテキストタイムコードにより示されるタイミングで、テキスト表示領域Ａ１にて表示される各文字が順次インテンドされるようにしてインテンド棒ＩＢの表示が行われるように、キャラクタ発生器１１に対し指示を行う動作を開始する。また、テキスト表示領域Ａ１内に全ての文字列を表示できない場合に対応しては、読み上げるべき文字が常に表示された状態にあるようにして文字列全体のスクロール表示が行われるように、キャラクタ発生器１１に対するテキストタイムコードに基づくスクロールタイミングの指示動作も開始するようにされる。
【０１４２】
ステップＳ３１４においては、録音停止指示を待機するようにされる。
操作部８からの操作入力として、録音停止を指示する所定の操作入力が得られて録音停止指示があったとされた場合は、ステップＳ３１５に進み、録音停止処理を行う。つまり、信号処理部３に対し入力音声信号についてのＡ／Ｄ変換・増幅処理を停止させる指示を行うと共に、不揮発性メモリ７への入力音声データの記録動作を停止するようにされる。
【０１４３】
なお、図示による説明は省略するが、このように音声データの記録が終了した場合には、録音画面中のduration time表示領域Ａ４内に、実際に録音された音声データの録音時間長の情報を表示するための処理も行うようにされる。この場合もduration timeの情報は、音声タイムコードに基づき取得する。
【０１４４】
続くステップＳ３１６においては、入力テキストを含む音声サムネイル画像を生成するための処理を実行するようにされる。
つまり、パーソナルコンピュータ３１側から入力され不揮発性メモリ７に記録したテキストデータの所定の一部と、ｔａｋｅ数の情報（この場合は初回録音時であるのでｔａｋｅ１となる）とをキャラクタ発生器１１に対して供給し、先の図１６に示したような構成による音声サムネイル画像を生成させる。
【０１４５】
そして、次のステップＳ３１７では、録音データとの対応づけ処理を行うようにされる。すなわち、上記のようにしてキャラクタ発生器１１により生成された音声サムネイル画像を不揮発性メモリ７に記録すると共に、当該音声サムネイル画像が同じく不揮発性メモリ７に記録された録音音声データと対応づけられるように管理情報を生成する。この場合も当該管理情報は例えば不揮発性メモリ７に記録するようにされる。
【０１４６】
続くステップＳ３１８では、プレビュー再生処理を実行する。先の説明によれば、このような録音後のプレビュー再生としては、録音した音声をスピーカＳＰから出力すると同時に、表示部１３上に、録音時に表示した録音画面と同様のテキストインテンド表示を行うようにされるものとなる。
ステップＳ３１８の処理としては、不揮発性メモリ７に記録した音声データを再生して信号処理部３に供給することで、録音音声をＤ／Ａコンバータ９・アンプ１０を介してスピーカＳＰから出力させる。また、これと同時にキャラクタ発生器１１に対して先のステップＳ３１３と同様の指示を行って、テキストインテンド表示（及び必要に応じてスクロール表示）を行わせる。
【０１４７】
その上で、次のステップＳ３１９では、修正するか否かについての判別処理を行うようにされる。
このステップＳ３１９としては、先ずは表示部１３上に先の図１７（ａ）に示した修正受け付け画面が表示されるように、キャラクタ発生器１１に対する指示を行う。その上で、この修正受け付け画面上に表示されるＹｅｓ／Ｎｏのアイコンの何れが、カーソルＣＲにより選択・決定されるかを判別するようにされる。
ステップＳ３１９において、Ｎｏのアイコンが選択された状態で、操作部８における決定キーなどの選択項目を決定するための所定操作が行われ、修正を行わないとの否定結果が得られた場合は、後の図２３に示すステップＳ３３５に処理を進めるようにされる。
【０１４８】
一方、ステップＳ３１９において、Ｙｅｓのアイコンが選択された状態で操作部８における決定キーなどの選択項目を決定するための所定操作が行われ、修正を行うとして肯定結果が得られた場合は、次の図２２に示すステップＳ３２０に進むようにされる。
【０１４９】
図２２は、主に、録音音声の修正動作（図１７、図１８を参照）時に対応して編集装置２１において行われるべき処理動作について示している。
図２２において、ステップＳ３２０では、時間軸圧縮／伸張を行うか否かについて判別処理を実行する。
このステップＳ３２０としては、先ずはキャラクタ発生器１１に対する指示を行って、表示部１３上に先の図１７（ｂ）に示した時間軸圧縮／伸張受け付け画面を表示させる。その上で、先の修正受け付け画面の場合と同様に、Ｙｅｓ／Ｎｏのアイコンの何れがカーソルＣＲにより選択・決定されるかを判別するようにされる。
ステップＳ３２０において、Ｙｅｓのアイコンが選択された状態で操作部８における決定キーなどの選択項目を決定するための所定操作が行われ、時間軸圧縮／伸張を行うとの肯定結果が得られた場合は、ステップＳ３２１に進むようにされる。
一方、Ｎｏのアイコンが選択された状態で操作部８における決定キーなどの選択項目を決定するための所定操作が行われ、時間軸圧縮／伸張を行わないとの否定結果が得られた場合は、ステップＳ３２５に進むようにされる。
【０１５０】
先ず、時間軸圧縮／伸張を行うとされた場合に対応した上記ステップＳ３２１においては、時間長の入力処理を行うようにされる。つまり、表示部１３上に目標時間長の情報を入力するための画面が表示され、時間長の入力操作に応じてその数値が表示されるようにキャラクタ発生器１１に対する指示を行う。
【０１５１】
続くステップＳ３２２では、入力された時間長の情報を決定する操作が行われたか否かについて判別処理を行う。この場合も例えば操作部８における決定キーなどの所定の決定操作が行われずに否定結果が得られたときは、ステップＳ３２１において引き続き時間長の入力処理を行うようにされる。
【０１５２】
一方、例えば操作部８における決定キーなどの所定の決定操作が行われて肯定結果が得られた場合は、ステップＳ３２３において、入力時間長に基づく時間軸圧縮／伸張処理を行うようにされる。すなわち、信号処理部３に対して決定された入力時間長の情報と録音された音声データとを供給し、音声データの時間長が入力時間長となるように時間軸圧縮／伸張処理を行わせるための指示を行う。
信号処理部３は、この時間軸圧縮／伸張処理によって生成した音声データをＣＰＵ５に対して供給するようにされる。
【０１５３】
ステップＳ３２４では、元の入力時間長との比に応じてテキストタイムコードを修正する処理を実行するようにされる。
すなわち、今回の時間軸圧縮／伸張処理が対象とした音声データの生成時に入力された元の目標時間長と、上記ステップＳ３２１にて圧縮／伸張処理の目標時間長として入力された目標時間長との比に応じて、読み上げ用データにおけるテキストタイムコードを修正するようにされる。
なお、上記元の入力時間長としては、今回の時間軸圧縮／伸張処理が初回である場合には先の図２０のステップＳ３０１にて受信された制限時間長の情報となるが、時間軸圧縮／伸張処理としては複数回行うことも可能であり、その場合における元の入力時間長は、直前に行われた時間軸圧縮／伸張処理時に対応して入力された目標時間長の情報となる。
【０１５４】
このステップＳ３２４の処理を実行すると、ステップＳ３３３に進み、次ｔａｋｅの音声サムネイル画像を生成するようにされる。つまり、当該修正が１回目の修正であればｔａｋｅ２、当該修正が２回目であればｔａｋｅ３といったように、修正回数に応じたｔａｋｅ数を示す音声サムネイル画像データを生成するようにされる。
なお、確認のために述べておくと、この場合の音声サムネイル画像の生成処理としては、キャラクタ発生器１１に対し指示するｔａｋｅ数の情報が異なる以外は、先のステップＳ３１６（図２１）と同様の処理を行うようにされる。すなわち、このステップＳ３３３における音声サムネイル画像としては、先の図１６に示した音声サムネイル画像についてそのｔａｋｅ数の内容のみが異なるものを生成するようにされているものである。
【０１５５】
そして、次のステップＳ３３４では、音声データとの対応づけ処理を実行する。すなわち、先のステップＳ３２３、又は後述するステップＳ３２６若しくはＳ３２９の処理によって新たに得られた音声データと、ステップＳ３３３にて生成した新たな音声サムネイル画像との対応づけ処理を行うものである。
【０１５６】
このステップＳ３３４の処理を実行すると、図示するようにして先の図２１のステップＳ３１８に戻り、再びプレビュー再生処理を実行するようにされる。つまり、これにより修正後の音声データに基づくプレビュー再生が行われることになる。
そして、このプレビュー再生後にはステップＳ３１９にて修正するか否かの判別処理が行われ、これによって、先にも述べたように修正を確定するまで録音音声についての修正を受け付けるようにされている。
【０１５７】
続いて、図２２において、時間軸圧縮／伸張を行わないとされた場合に対応したステップＳ３２５においては、部分指定を行うか否かについての判別処理を行うようにされる。
このステップＳ３２５としては、先ずはキャラクタ発生器１１に対する指示を行って、表示部１３上に先の図１７（ｃ）に示した部分指定受け付け画面を表示させる。その上で、この場合も画面上のＹｅｓ／Ｎｏのアイコンの何れがカーソルＣＲにより選択・決定されるかを判別するようにされる。
【０１５８】
ステップＳ３２５において、Ｎｏのアイコンが選択された状態で操作部８における決定キーなどの所定の決定操作が行われ、部分指定を行わないとの否定結果が得られた場合は、ステップＳ３２６に進み録り直し処理を実行するようにされる。
すなわち、初めからナレーション音声を録り直すために、先ずは表示部１３上に再度図１２に示したような初期状態の録音画面が表示されるようにキャラクタ発生器１１に対する指示を行う。その上で、録音開始指示を待機し、録音開始指示があった場合は先の図２１のステップＳ３１２〜Ｓ３１５と同様の処理を実行して、音声の録音とテキストインテンド表示とを行う。
【０１５９】
このようにして録り直し処理を実行すると、先に説明したステップＳ３３３に進み、次ｔａｋｅの音声サムネイル画像の生成処理（Ｓ３３３）と音声データとの対応づけ処理（Ｓ３３４）とを行った後、図２１のステップＳ３１８に戻るようにされる。
【０１６０】
一方、上記ステップＳ３２５において、Ｙｅｓのアイコンが選択された状態で操作部８における決定キーなどの所定の決定操作が行われて、部分指定を行うとの肯定結果が得られた場合は、ステップＳ３２７に進んで部分指定処理を実行するようにされる。
このステップＳ３２７としては、先ずはキャラクタ発生器１１に対する指示を行って表示部１３上に先の図１８（ａ）に示したような部分指定画面を表示させる。その上で、操作部８の例えば方向キーの操作に応じて、この部分指定画面上に表示される録り直し部分の範囲指定を行うためのカーソルＣＲを移動させるための処理を行い、またこの方向キーとは別の他の所定キーが操作された状態での方向キーによるカーソル移動操作に応じては、範囲指定バーＳＢの表示を伸張・収縮させて文字列の選択範囲を示すための処理を行うようにされる。
【０１６１】
そして、続くステップＳ３２８においては、選択範囲が決定されたか否かについて判別処理を行うようにされる。この場合、先の説明によれば上記範囲指定バーＳＢにより選択された範囲は方向キーと共に押圧した上記所定キーをはなすことで確定するようにされるので、このステップＳ３２８においてはその所定キーによる操作入力が終了したか否かについて判別処理を行う。
上記所定キーによる操作入力が終了せず未だ選択範囲が決定（確定）されていないとして否定結果が得られた場合は、引き続き上記ステップＳ３２７による部分指定処理を行うようにされる。
【０１６２】
一方、上記所定キーによる操作入力が終了して選択範囲が決定（確定）されたとして肯定結果が得られた場合は、ステップＳ３２９に進んで指定部分についての録り直し処理を実行するようにされる。
先に説明したように、このような指定部分についての録り直し処理としては、例えば先の図１８（ａ）と同様にテキスト表示領域Ａ１、テキストタイムコード表示領域Ａ２、制限時間表示領域Ａ３、duration time表示領域Ａ４の各領域が設けられた画面を表示部１３上に表示し、そのテキスト表示領域Ａ１には指定部分の文字列が表示された状態となるようにする。
そして、その状態において、録音開始指示が行われたことに応じて、音声入力端子ＴAin→信号処理部３を介して入力される音声データについての録音動作を開始すると共に、テキスト表示領域Ａ１に表示される上記指定部分の先頭からの文字のインテンド表示が開始されるようにキャラクタ発生器１１に対する指示を行う。この場合、インテンド表示は、指定範囲の最後の文字を覆ったところで終了する。また、録音動作としても同タイミングで停止するようにされる。
【０１６３】
この指定部分についての録り直し処理が終了すると、次のステップＳ３３０では、その録り直し部分についてのプレビュー再生処理を行うようにされる。すなわち、録り直し音声データを再生して信号処理部３に供給してスピーカＳＰからの音声出力を開始させると共に、表示部１３上に、上述した指定部分の録り直し処理時と同様の画面表示が行われるようにキャラクタ発生器１１に対する指示を行う。
【０１６４】
続くステップＳ３３１では、指定部分についての修正を行うか否かについての判別処理を行う。このステップＳ３３１の判別処理としては、キャラクタ発生器１１に対する指示を行って先の図１７（ａ）と同様の内容を有する修正受け付け画面を表示させた上で、当該画面上のＹｅｓ／Ｎｏのアイコンの何れがカーソルＣＲにより選択・決定されるかを判別することで行うようにされる。
ステップＳ３３１において、Ｙｅｓのアイコンが決定されて修正を行うとの肯定結果が得られた場合は、先のステップＳ３２９に戻り、再び指定部分についての録り直し処理を行うようにされる。つまり、これにより指定部分の録り直し動作についても、修正が確定されるまで修正を受け付けるようにされている。
【０１６５】
一方、ステップＳ３３１において、Ｎｏのアイコンが決定されて修正を行わないとの否定結果が得られた場合は、ステップＳ３３２において、指定部分を録り直し部分に置き換えた音声データを生成するようにされる。
先にも述べたが、この場合の範囲指定はテキストデータ側の範囲を指定することで行われているので、指定範囲を音声データ側に当てはめるための処理を行う必要がある。この場合は、ＣＰＵ５が録音音声データに対して音声タイムコードを付すようにされているので、この音声タイムコードと、上述のようにして指定されたテキスト部分のテキストタイムコードとに基づき、音声データ側の該当するデータ部分を特定するようにされる。
その上で、このようにして特定された音声データ部分を、先のステップＳ３２９の録り直し処理により得られた音声データと入れ替えた（置き換えた）音声データを生成する。
【０１６６】
このようにして指定部分を録り直し音声に置き換えた音声データを生成すると、ステップＳ３３３に進み、次ｔａｋｅの音声サムネイル画像の生成処理（Ｓ３３３）と音声データとの対応づけ処理（Ｓ３３４）とを行った後、図２１のステップＳ３１８に戻るようにされる。
【０１６７】
続いて、図２３は、主に編集画面の表示時に対応して編集装置２１において行われるべき処理動作について示している。
図２３において、先ずステップＳ３３５では、映像サムネイル画像と音声サムネイル画像の読み出し処理を実行するようにされる。先にも述べたように、この場合のＣＰＵ５は、予めディスクドライブ２により光ディスクＤに記録された映像データ中の所定の一部の画像データ（この場合も例えば先頭のフレーム画像データ）を再生させ、その画像データに基づき映像サムネイル画像を生成しておくようにされる。そして、これら映像サムネイル画像を不揮発性メモリ７に記録しておくようにされ、また、各映像サムネイル画像とその生成の基とした映像データとの対応づけも行っておくようにされている。
このステップＳ３３５としては、このように不揮発性メモリ７に対して予め記録された映像サムネイル画像と、同じく不揮発性メモリ７に記録されている音声サムネイル画像とを読み出す処理となる。
【０１６８】
その上で、次のステップＳ３３６では、編集画面の表示処理を実行するようにされる。すなわち、上記ステップＳ３３５の処理によって読み出した映像サムネイル画像、音声サムネイル画像をキャラクタ発生器１１に対して供給すると共に、これらが先の図１９に示したようにして表示部１３上に表示されるように指示を行う。
【０１６９】
［第２の実施の形態の変形例］
なお、第２の実施の形態では、音声サムネイル画像として入力テキストデータの所定の一部のみが示されるようにする場合を例示したが、入力テキストデータの全てが示されるようにすることもできる。
但し、音声サムネイル画像としては、先の図１９の編集画面を参照してもわかるように、対応する音声データを選択・指定するためのアイコンとして機能するものであって、その表示サイズは比較的小さいものとなる。従って、入力テキストデータの全てを表示させるとなると、文字が判別できないほど小さくなってしまうなどの問題が生じる可能性がある。
【０１７０】
そこで、このようにしてテキストデータの全てが表示されるようにするとした場合には、次の図２４に示すようにして、入力テキストデータがスクロール表示されるようにすることもできる。この図２４の例では、入力テキストデータが図中のスクロール方向として示すように、横方向にスクロールされるようにする場合を例示している。
【０１７１】
ここで、このようなスクロール表示の為される音声サムネイル画像としては、動画像によるサムネイル画像を生成するようにされる。すなわち具体的には、ＣＰＵ５がキャラクタ発生器１１に対してテキストデータを供給すると共に、そのテキストデータに基づく文字列が画像内の所定の位置で所定速度で以てスクロール表示される動画像データが生成されるように指示を行う。これによって図２４に示すような音声サムネイル画像を実現できる。
【０１７２】
また、音声サムネイル画像としては、次の図２５に示すように、入力テキストデータの一部分ずつが順次拡大表示されるようにすることもできる。つまりこの場合、ＣＰＵ５は、キャラクタ発生器１１に対してテキストデータを供給すると共に、そのテキストデータに基づく文字列の一部分ずつが順次拡大表示される動画像データを生成するように指示を行うようにされる。
【０１７３】
或いは、次の図２６に示すようにして、録音時の録音画面上で行ったものと同様のスクロールによるテキスト表示及びテキストのインテンド表示が行われるようにすることもできる。
この場合、ＣＰＵ５は、先の図２１のステップＳ３１３と同様の処理を行って、このように入力テキストデータに基づく表示文字列が順次スクロールされ、且つそれら表示文字列がインテンド棒ＩＢにより順次インテンドされる動画像データを生成させる。
この場合、スクロール及びインテンドのタイミングは、必ずしもテキストタイムコードに基づくタイミングで行われる必要はない。
【０１７４】
これら図２４〜図２６の変形例によれば、編集画面上において表示される音声サムネイル画像としては、対応づけられる音声データのナレーション内容の全てを示すことが可能となり、これによって各音声データ間の混同をさらに生じ難くすることができる。
【０１７５】
＜変形例＞
以上、本発明の各実施の形態について説明したが、本発明としてはこれまでに説明した実施の形態に限定されるべきものではない。
例えば、各実施の形態において示した、録音音声データと対応づけるべき音声サムネイル画像の構成はあくまでも一例に過ぎず、その構成を限定するものではない。このような音声サムネイル画像としては、少なくとも２色以上の画素データが含まれる画像データ（静止画像、動画像どちらも可）を生成すれば、従来の全黒画像による音声サムネイル画像とは異なり、例えば全黒映像に基づく映像サムネイル画像との混同が生じないようにすることができる。つまりは、このように少なくとも２色以上の画素データにより構成すれば、文字やマークなど所定の情報を示すことが可能となり、これによって映像サムネイル画像との混同を回避することができるものである。また、同時に、上記所定の情報としては音声データの内容を表す情報が示されるようにすることもでき、これによれば、音声データ間の区別も視覚的に行うことが可能となるようにすることができる。換言すれば、逐次音声データを再生させずともそれらの内容把握が可能となるようにすることができる。
【０１７６】
また、実施の形態では、編集装置（１，２１）自らが、光ディスクＤに記録される映像データに基づいて映像サムネイル画像の生成、及び映像サムネイル画像と映像データとの対応づけを行うものとしたが、このような映像サムネイル画像としては、光ディスクＤにおいて映像データと対応づけられて既に記録されている場合も想定できる。そのような場合、編集装置（１，２１）としては、編集画面の表示にあたってこのように光ディスクＤに記録された映像サムネイル画像を読み出してそれを表示するように構成されていればよい。
【０１７７】
また、第２の実施の形態において、テキストのインテンド表示としては、文字上に重畳するようにして表示したインテンド棒をテキストタイムコードに基づくタイミングて順次延ばしていくように表示する場合を例示したが、この他にも、例えば読み上げられるべき文字を順次他の色で表示していく、或いは読み上げられるべき文字のみを他の文字と大きさを変えて示すなどといった他の表示態様とすることもできる。
何れにしても、本発明で言うインテンド表示とは、読み上げられるべき文字位置を指示することのできる表示態様が採られればよいものであり、その具体的な表示態様について限定はしない。
【０１７８】
また、第２の実施の形態では、インテンド表示は停止せずに継続的に行われる場合を例示したが、例えば「、」や「。」（句読点）の部分ではインテンド表示を所定時間長だけ停止させるなどいった表示態様を採ることもできる。
【０１７９】
また、インテンド表示を行うにあたっては、ＣＰＵ５が読み上げ用データに基づき、現在インテンドすべき文字位置の情報を順次キャラクタ発生器１１に指示するものとしたが、これに代えて、読み上げ用データをキャラクタ発生器１１に供給し、キャラクタ発生器１１がこの読み上げ用データのテキストタイムコードに従って独立してインテンド表示処理を行うように構成することもできる。
【０１８０】
また、第２の実施の形態では、ナレーション音声の録音時に対応して表示する録音画面上において入力テキストデータの全てを表示しきれない場合に対応した動作として、表示文字を順次スクロールさせるものとしたが、これに代えて、例えば表示される最終文字にインテンド表示が行き着いたところで、続きの文字列を入れ替えるようにして表示させるようにすることもできる。
【０１８１】
また、第２の実施の形態において、録音画面の表示は、入力テキストデータが確定され、それに応じた読み上げ用データが生成された後の所要タイミングで自動的に行われるものとしたが、これに代えて、例えば録音スタンバイ指示のための所定操作に応じて表示するように構成することもできる。
【０１８２】
また、第２の実施の形態では、録音画面の表示状態において、録音開始指示に応じては直ちに録音とテキストインテンド表示とを開始するものとしたが、録音開始指示に応じては、例えば画面上の所定の領域において所定時間長のカウントダウン表示を行い、その終了後に録音動作とテキストインテンド表示とを開始するようにすることもできる。
【０１８３】
また、特に録音音声の修正として指定部分の録り直しを行う際には、その指定部分の前の所定数の文字列をのりしろ部分として、こののりしろ部分からインテンド表示を助走させるように表示し、指定部分にインテンド表示が達したことに応じて録音を開始するようにすることもできる。
【０１８４】
また、このような録り直しを行った場合には、元の録音音声と録り直し音声とで音声レベルが異なることがあるので、そのような場合に対応して、録り直し部分を元の音声データに入れ替えるにあたっては、音声ゲインの調整を行うことが可能となるようにすることもできる。
【０１８５】
また、第２の実施の形態では、入力テキストデータの確定後に読み上げ時間長の計算を行うように構成したが、テキストデータの入力中において入力された文字範囲についての読み上げ時間長をリアルタイムで逐次計算し、そのようにして逐次得られる読み上げ時間長の情報を逐次表示するように構成することもできる。
【０１８６】
また、読み上げ時間長の計算手法としては、実施の形態で例示したものに限定されず、他の手法を採ることもできる。例えば、１文字ごとでなく、単語や文節など複数文字ごとに発語数を格納したテーブルを用意しておくものとし、このテーブルの情報と読み上げ速度の係数とに基づき入力テキストデータの読み上げ時間長を計算するように構成することもできる。
或いは、文字、単語、文節ごとに読み上げ時間長を直接格納したテーブルを用いることで読み上げ時間長を計算するように構成することもできる。
【０１８７】
また、テキストタイムコードとしては一文字ごとに付すものとしたが、複数文字ごとに付すようにすることもできる。
【０１８８】
また、実施の形態では、録音音声は編集装置（１，２１）が内蔵する不揮発性メモリ７に記録するものとしたが、光ディスクＤに対して記録するようにすることもできる。
また、不揮発性メモリ７以外に、別途ＨＤＤなどの記憶媒体が備えられる場合には、その記録媒体に対して録音音声を記録するようにしてもよい。
【０１８９】
また、実施の形態では、編集装置（１，２１）は光ディスクＤについての記録再生が可能とされ、対象とする映像は光ディスクＤから読み出すようにされる場合を例示したが、編集装置としては例えば磁気テープ媒体等の他の記録媒体に対応する構成とすることもできる。
【０１９０】
また、第２の実施の形態では、テキストインテンド表示が、編集装置２１に備えられる表示部上で行われる場合を例示したが、例えば外部に別途のディスプレイ装置がある場合には、そのディスプレイ装置上にて行うようにすることもできる。その場合、編集装置２１のキャラクタ発生器１１の出力を、上記外部のディスプレイ装置にも供給できるように構成されればよい。
【０１９１】
また、第２の実施の形態では、本発明で言うテキスト入力手段が、操作入力に基づきテキストデータを入力するように構成される場合を例示したが、この他、入力音声についての音声認識を行って、その入力音声をテキストデータに変換して入力するように構成することもできる。例えば、このように音声認識によりテキストデータの入力を行う場合には、入力音声の録り直しによりテキストデータの不具合部分の修正を行うようにすることができる。
また、テキストデータの入力手法としては、操作入力に基づく以外にも、所要の記録媒体に記録されているテキストデータを読み出すことで行うようにすることもできる。
【０１９２】
また、第２の実施の形態では、映像クリップは映像データのみから成る場合を例示したが、映像クリップとしては、それと同期する音声データ（例えば撮影時に同時に現場音声を録音している場合など）が含まれている場合もある。
このような場合において、映像クリップと録音音声（録音支援動作により録音された音声ファイル）との合成処理は、上記のように映像クリップに同期するようにして含まれている音声に対して録音音声を合成（ミックス）する処理が行われるようにすればよい。
【０１９３】
また、第２の実施の形態では、テキスト入力を受け付ける装置がパーソナルコンピュータ３１とされる場合を例示したが、テキスト入力の受け付けが可能であって外部機器（つまりこの場合は編集装置２１）とのデータ通信を可能とする所要のインタフェースが備えられる機器であれば、他の電子機器とすることができる。
【０１９４】
また、第２の実施の形態では、テキスト入力はパーソナルコンピュータ３１側で受け付け、編集装置２１ではパーソナルコンピュータ３１側からの入力テキストデータについて読み上げ用データを生成するものとしたが、編集装置２１側の操作子としてキーボードを備える場合等には、テキストの入力も編集装置２１側で受け付けるように構成し、編集システム２０としての動作を全て編集装置２１単体で実現するように構成することもできる。
【０１９５】
或るは逆に、編集システム２０としての動作をパーソナルコンピュータ３１側で全て行うように構成することもできる。この場合は、編集装置２１側でハードウエアにより構成されていた読み上げ時間計算／読み上げ用データ生成部２４、信号処理部３（外部音声の録音機能）は、ＣＰＵ３２のソフトウエア処理により実現されるように構成すればよい。
【０１９６】
また、例えばパーソナルコンピュータ３１側で読み上げ時間計算機能と読み上げ用データ生成機能とを有するようにした場合には、入力テキストデータの読み上げ時間の計算と入力テキストデータに基づく読み上げ用データの生成までをパーソナルコンピュータ３１側で行うものとし、編集装置２１としてはパーソナルコンピュータ３１側で生成された読み上げ用データに基づき、テキストインテンド表示による録音動作と録音音声と編集済み映像と合成を行うようにすることもできる。
【０１９７】
このようにして第２の実施の形態で説明した編集システム２０としての動作を実現するにあたっては、システムの構成要素は単体装置、又は複数装置とすることができる。
【０１９８】
また、確認のために述べておくと、本発明の表示システムとしては、必ずしも入力テキストに基づくインテンド表示による録音支援動作を行うことができるように構成されている必要はない。つまり、本発明の表示システムとしては、映像データと対応づけられた画像データと、音声データと対応づけられた画像データとを表示する表示システムであって、少なくとも、
「  画像データを生成する画像データ生成手段と、
上記画像データ生成手段により少なくとも２色以上の画素データを含む複数色画像データが生成されるように制御して、生成された上記複数色画像データを所要の記録媒体に記録された音声データと対応づけると共に、上記映像データと対応づけられた画像データと上記複数色画像データとが所要の表示手段に表示されるように制御する制御手段と」
が備えられるものであればよい。
そして、これら構成要素を含むものであれば、単体装置又は複数装置の何れによっても実現することができるものである。
【図面の簡単な説明】
【０１９９】
【図１】第１の実施の形態の表示システムとしての編集装置の内部構成を示すブロック図である。
【図２】サムネイル画像として映像サムネイル画像のみが表示された編集画面を例示した図である。
【図３】第１の実施の形態において生成される音声サムネイル画像を例示した図である。
【図４】映像サムネイル画像と音声サムネイル画像とが表示された編集画面を例示した図である。
【図５】第１の実施の形態としての動作を実現するための処理動作について示したフローチャートである。
【図６】第１の実施の形態の変形例について説明するための図である。
【図７】第１の実施の形態の他の変形例について説明するための図である。
【図８】第２の実施の形態としての表示システムの概要について説明するための図である。
【図９】第２の実施の形態の表示システムを構成する編集装置の内部構成を示すブロック図である。
【図１０】第２の実施の形態の表示システムを構成するパーソナルコンピュータの内部構成を示すブロック図である。
【図１１】第２の実施の形態としての表示システムの動作を説明するための図として、特にテキストデータの入力から読み上げ用データの生成までの動作について模式的に示した図である。
【図１２】第２の実施の形態の表示システムにより行われる録音支援動作時（及び録音後のプレビュー再生時）に対応して表示されるべき録音画面の例を示した図である。
【図１３】同じく、第２の実施の形態の表示システムにより行われる録音支援動作時（及び録音後のプレビュー再生時）に対応して表示されるべき画面の例を示した図である。
【図１４】同じく、第２の実施の形態の表示システムにより行われる録音支援動作時（及び録音後のプレビュー再生時）に対応して表示されるべき画面の例を示した図である。
【図１５】同じく、第２の実施の形態の表示システムにより行われる録音支援動作時（及び録音後のプレビュー再生時）に対応して表示されるべき画面の例を示した図である。
【図１６】第２の実施の形態において生成される音声サムネイル画像の例示した図である。
【図１７】録音音声の修正受け付け時に対応して表示されるべき画面の例を示した図である。
【図１８】第２の実施の形態において録音音声の修正部分の指定時に対応して表示されるべき部分指定画面の例を示した図である。
【図１９】第２の実施の形態において表示される編集画面を例示した図である。
【図２０】第２の実施の形態の表示システムとしての動作を実現するために行われるべき処理動作を示すフローチャートとして、主に、制限時間・テキストデータの入力から読み上げ用データの生成までの動作時に対応して行われるべき処理動作を示したフローチャートである。
【図２１】第２の実施の形態の表示システムとしての動作を実現するために行われるべき処理動作について示すフローチャートとして、主に、録音支援動作時・音声サムネイル画像生成時に対応して行われるべき処理動作を示したフローチャートである。
【図２２】第２の実施の形態の表示システムとしての動作を実現するために行われるべき処理動作について示すフローチャートとして、主に、録音音声の修正動作時に対応して行われるべき処理動作を示したフローチャートである。
【図２３】第２の実施の形態の表示システムとしての動作を実現するために行われるべき処理動作について示すフローチャートとして、主に、編集画面の表示時に対応して行われるべき処理動作を示したフローチャートである。
【図２４】第２の実施の形態の変形例について説明するための図である。
【図２５】第２の実施の形態の他の変形例について説明するための図である。
【図２６】第２の実施の形態のさらに他の変形例について説明するための図である。
【図２７】従来の音声サムネイル画像について説明するための図である。
【符号の説明】
【０２００】
１，２１  編集装置、２  ディスクドライブ、３  信号処理部、４  ＲＯＭ、４ａ  プログラム、５,３２  ＣＰＵ、６  ＲＡＭ、７  不揮発性メモリ、８  操作部、９  Ｄ／Ａコンバータ、１０  アンプ、１１  キャラクタ発生器、１２  表示駆動部、１３  表示部、ＴVin  映像入力端子、ＴAin  音声入力端子、ＴVout  映像出力端子、ＴAout  音声出力端子、Ｔusb  ＵＳＢ端子、ＳＰ  スピーカ、２０  編集システム、２２  編集装置側プログラム、２３,４１  ＵＳＢインタフェース、２４  読み上げ時間計算／読み上げ用データ生成部、３３  メモリ部、３４  入力処理部、３５  入力部、３６  表示処理部、３７  ディスプレイ、３８  ドライブ制御部、３９  メディアドライブ、４０  ＨＤＤ、４０ａ  ＰＣ側プログラム、４２  バス
【図１】
2007329624.tif 000003
【図２】
2007329624.tif 000004
【図３】
2007329624.tif 000005
【図４】
2007329624.tif 000006
【図５】
2007329624.tif 000007
【図６】
2007329624.tif 000008
【図７】
2007329624.tif 000009
【図８】
2007329624.tif 000010
【図９】
2007329624.tif 000011
【図１０】
2007329624.tif 000012
【図１１】
2007329624.tif 000013
【図１２】
2007329624.tif 000014
【図１３】
2007329624.tif 000015
【図１４】
2007329624.tif 000016
【図１５】
2007329624.tif 000017
【図１６】
2007329624.tif 000018
【図１７】
2007329624.tif 000019
【図１８】
2007329624.tif 000020
【図１９】
2007329624.tif 000021
【図２０】
2007329624.tif 000022
【図２１】
2007329624.tif 000023
【図２２】
2007329624.tif 000024
【図２３】
2007329624.tif 000025
【図２４】
2007329624.tif 000026
【図２５】
2007329624.tif 000027
【図２６】
2007329624.tif 000028
【図２７】
2007329624.tif 000029