【事件の表示】
　特願２００２−１０４９１５「記録音声を探索し、関連セグメントを検索する方法及びシステム」拒絶査定不服審判事件〔平成１４年１２月２０日出願公開、特開２００２−３６６５５２〕について、次のとおり審決する。
【結　論】
　本件審判の請求は、成り立たない。
【理　由】
１．手続きの経緯・本願発明
 　本願は、平成１４年４月８日（優先権主張２００１年４月１０日米国、２００１年９月２４日米国）の出願であって、その請求項１２に記載された発明（以下、「本願発明」という。） は、平成１７年１１月１１日付けの手続補正書によって補正された明細書及び図面の記載からみて、その特許請求の範囲の請求項１２に記載された次のとおりのものである。
　「【請求項１２】
　データベース内の記録音声を探索するシステムであって、
　音声認識システムを用いて、前記記録音声をテキストに変換する手段であって、変換音声内で自然に発生する途切れが、複数のタイムスタンプを提供するために使用される、前記変換する手段と、
　情報エクステンダを用いて、前記変換された記録音声のテキストから前記記録音声のフル・テキスト索引を作成する手段であって、前記フル・テキスト索引が、前記記録音声内での単語の出現を指し示す前記複数のタイムスタンプを含む、前記作成する手段と、
　フル・テキスト・サーバにより、前記作成されたフル・テキスト索引を用いて、前記変換されたテキストを探索する手段と、
　前記探索されたテキスト、前記フル・テキスト索引、及び前記記録音声を前記データベースに記憶する手段と、
　を含み、前記記録音声中の特定の内容が、全部の記録音声を聴取することなく、前記複数のタイムスタンプにより特定の時点における記録音声を指し示す前記フル・テキスト索引を用いて再生されるシステム。」
 　 
２．引用例
　原査定の拒絶の理由に引用された特表平１０−５０７５５４号公報（以下、「刊行物１」という。）には、
　ア　「（４）オーディオデータおよびビデオ画像からディジタルライブラリを作成する装置は；前記オーディオデータを転換し、そして前記転換オーディオデータに第１組の時刻記録を付ける手段（２７）と；
      前記転換オーディオデータを索引する手段（３０）と；
      前記ビデオデータをディジタル化し、そして前記ディジタル化ビデオデータに前記第１組の時刻記録に関連する第２組の時刻記録を付ける手段（３１）と；
      １組のルールを格納する手段（３７）と；
      前記ディジタル化ビデオデータを前記格納した１組のルール（３７）に従ってパラグラフ（３３）に分割する手段と；そして
      各自の組の時刻記録の付いた前記索引オーディオデータおよび前記ディジタル化ビデオデータを格納する手段（３６）；
    とを備えていることを特徴とする前記装置。
（５）前記データが索引される前に、前記転換オーディオデータを処理する自然言語インタプリタ手段（２９）を備えていることを特徴とする、請求の範囲第４項記載の装置。
（６）前記自然言語インタプリタ手段（２９）は前記１組のルール（３７）を更新することを特徴とする、請求の範囲第４項記載の装置。」（２頁２０行〜３頁９行）、
　イ　「（２４）さらに、前記索引オーディオデータおよび前記ディジタル化ビデオデータが各自の組の時刻記録を付けて格納される前に、前記ディジタル化ビデオデータを圧縮する手段（３４）を備えていることを特徴とする、請求の範囲第４項記載の方法。
（２５）前記オーディオデータを転換し、そして前記転換オーディオデータに第１組の時刻記録を付ける前記手段（２７）は；
      各語の発生は開始時間と複数の可能な終了時間を持つ、１組の可能な語の発生を生じる手段（５２）と；
      前記終了時間の各々に対して複数の可能な開始時間を生成する手段（５４）と；
      前記オーディオデータに対して１組のＮ−最良仮定を発生する手段（５６）と；そして
      前記転換オーディオデータを生成するために、前記１組のＮ−最良仮定から最良スコアリング仮定を選択する手段（５８）；
    とを備えていることを特徴とする、請求の範囲第４項記載の装置。
（２６）前記１組の可能な語の発生を生じる前記手段は順方向時間同期パス機能（５２）を利用していることを特徴とする、請求の範囲第２５項記載の装置。
（２７）前記複数の可能な開始時間を生成する前記手段は逆方向時間同期パス機能（５４）を利用していることを特徴とする、請求の範囲第２５項記載の装置。
（２８）前記転換オーディオデータを索引する前に、前記転換オーディオデータに自然言語インタプリタを通過させる前記手段は；
      前記転換オーディオデータを集約する手段（１５０）と；
      データ抽出技術を利用して、前記転換オーディオデータにタグを付ける手段（１５２）と；そして
      意味的および統語的制約と音声知識ベースを利用して、前記タグ付き転換オーディオデータを修正する手段（１５４）；
    とを備えていることを特徴とする、請求の範囲第５項記載の装置。」（５頁１３行〜６頁１２行）、
　ウ　「発明の背景の説明
  マルチメディア技術の出現の結果として、間もなく、膨大なディジタルビデオライブラリがわが国の情報スーパーハイウエイで利用可能になるであろう。これらのライブラリは、業務の遂行、職業的活動および個人的活動に強い衝撃を与えるであろう。しかし、利用できる情報の純粋量のために、情報を単に記憶して、後日その情報を再生するだけでは十分でない。本質的に、それは、コマーシャルビデオ即時回答サービスの概念であって、比較的単純なものである。新規技術は、膨大なデータライブラリを作成し、編成し、かつ探索し、次いでそれらを検索し、かつ有効に再利用する必要がある。
  現在、多くの放送テレビジョンは限定字幕つきであっても、わが国のビデオおよびフィルム資産の大部分はそうではない。この理由から、どんなタイプのディジタルビデオライブラリでも、ある種のオーディオ転換装置を利用しなければならない。このオーディオ転換の文脈に、多くの誤りおよび可変性の原因が生じるのは当然である。例えば、放送ビデオ作品は、ドキュメンタリ風のインタビューにしても劇場作品にしても、様々な場所に置かれた複数のスピーカーから音声を録音しなければならない。その結果、様々な信号対雑音比特性を持つ音声信号品質を生じる。さらに、スピーカの様々な配置および部屋の特別な反響特性の効果が問題を産み出している。さらになお、放送ビデオ作品において伝統的に利用されている卓上マイクロフォン、ラペルマイクロフィン、および指向性ブームマイクロフォンがオーディオ転換の音源として利用されているので、マイクロフォン特性の差および信号対雑音比の差から生じる可変性のために性能をかなり劣化させることもありうる。
  その上、典型的なビデオインタビューでは、人々はよどみなく話している。このことは、多くの言葉が切り詰められていたり、間違って発音されていたりすることを含んでいる。注意深い明瞭な発音が基準になっている通常の口述用システムで利用される発音の語彙記述は、自発的な、よどみない話し方に対して非常に良好に働くとは言えない。さらに、定義域が文中に使用されそうな語量のサイズと特質を限定しているウォールストリートジャーナルディクテーションモデルとは異なり、放送ビデオからのオーディオ転換は、一般に、そのような制約を持たない傾向がある。従って、いずれのディジタルビデオライブラリシステムによってもアドレスされなくてはならない生のビデオテープの場面のオーディオ部分によって、多くの難問難題が提示される。」（９頁９行〜１０頁１３行）、
エ　「テキスト探索には、代表的に、キーワードあるいは、若干の環境では、限定された自然言語の推論を利用することが含まれる。現在の検索技術は、新聞、電子アーカイブおよび、文法的に誤りのない、適切な綴りで書かれた内容のその他の資料からのテキスト材料については良好に働く。さらに、自然言語の問い合わせはユーザによる所望の主題についての直接描写を許容している。しかし、有限な１組の誤りを含む転換を探索することに基づいたビデオ検索作業は、最新技術への挑戦である。オーディオの完全な転換を理解することでさえ、現在の自然言語技術にとっては複雑すぎるであろう。
・・・（中略）・・・
　ビデオ探索に関する問題と同様に、もう少し明瞭に、オーディオを探索することに関する類似した問題もある。走査中、オーディオを高速でプレイすることは実用的でない。通常速度の１．５から２倍を超えると、高速再生速度は周波数を聞き取れない範囲に偏移させるので、オーディオは理解できなくなる。ディジタル信号処理技術は、高い再生速度における周波数偏移を低減するのに役立つが、これらのディジタル信号処理技術は、アナログビデオディクス走査のそれによく似たサウンドバイトを提供する。
  想像できるように、マルチメディアシナリオにおいては問題はより複雑である。テキスト、オーディオおよびビデオの統合は、このように、克服すべき多くの障害を提示している。平均的インタービュービデオでは、１分間に約 １５０ワードが話される。それは、１時間ビデオでは約９０００ワードあるいはざっと１５ページのテキストに換算される。テキストをざっと読む人は、関連する部分を比較的素早く見つけることができる。しかし、ビデオテープの話の中に含まれる特定の話題を探索しようとする場合、探索問題は重大である。通常速度の３倍から４倍の高い再生速度が理解できるとしても、オーディオおよびビデオの連続プレイは全体的に受け入れ難い探索メカニズムである。目的情報が１時間ビデオファイルの中間にあるとすると、それを見つけるのになお、約７分から１０分かかるであろう。」（１１頁１行〜１２頁８行）、
オ　「発明はまた、オーディオデータおよびビデオ画像からディジタルライブラリを作成する装置に関する。この装置は、オーディオデータを転換し、そして転換したオーディオデータに第１組の時刻記録を付ける手段と、転換したオーディオデータを索引する手段と、ビデオデータをディジタル化し、そしてディジタル化ビデオデータに第１組の時刻記録に関連する第２組の時刻記録を付ける手段と、１組のルールを格納する手段と、格納した１組のルールに従ってディジタル化ビデオデータをパラグラフに分割する手段とを含んでいる。さらに、各自の組の時刻記録を持つ索引したオーディオデータおよびディジタル化ビデオデータを格納する手段も設けられている。この装置はさらに、オーディオデータが索引される前に転換したオーディオデータを処理し、そして１組のルールセットを更新する自然言語インタプリタを含んでいる。
  本発明はまた、自然言語技術を利用して、ディジタルライブラリから情報を検索するのに利用される探索を公式化する方法および装置に関する。この探索方法は独立モードあるいはネットワーク環境において実現することができる。
  本発明の目的は、デスクトップコンピュータおよびデータ通信ネットワークを介して、全内容および知識ベース型探索ならびに検索を行わせる大型、オンライン、ディジタル、ビデオライブラリを含むシステムを確立することである。本発明の目的はなお、ディジタルビデオライブラリを作成し、編成するための方法を開発することである。本発明の目的はさらに、マルチメディアシステムによって提示された独自の要求のために、ディジタルビデオライブラリの部分を効果的に探索し、検索する技術を開発することである。
  本発明の特徴は、音声、自然言語および画像理解技術がディジタルライブラリの作成および研究のために統合されていることである。本発明の別の特徴は、高品質の音声認識機能が提供されていることである。本発明のなお別の特徴は、全テキスト探索および検索システムに対して自然言語理解システムが備えられていることである。発明のなお別の特徴は、ビデオシーケンスを分割するために画像理解機能が備えられていることである。最後に、もう１つの特徴は、このシステムは種々のネットワークアーキテクチャに適応できることである。」（１５頁１４行〜１６頁１３行）、
カ　「システム概観
  第１図では、本発明によって構成されたディジタルビデオライブラリシステムの大要が１０で示されている。同じ要素を表わすために、種々の図において同じ参照番号が使用される。第１図では、ディジタルビデオライブラリシステム１０は２つの部分１２，１４を持っている。オフライン部分１２はディジタルライブラリ３６の作成に携わる。オンライン部分１４は、ディジタルライブラリ３６の探究で利用される機能を含んでいる。ここで使用される場合、用語ディジタルビデオライブラリシステム１０はシステム全体を指すが、用語ディジタルライブラリはオフライン部分１２によって作成されたデータベース３０を指す。
  オフライン部分１２は、オーディオデータ１８およびビデオデータ２０から成る生のビデオ材料１６を受信する。生のビデオ材料１６は、種々の資料の１つまたは幾つかからのオーディオビデオを含むことができる。」（１７頁１７行〜２８行）、
キ　「オーディオデータ１８は音声と言語解釈２８および音声と言語索引３０の機能に委ねられるが、その各々について詳細に説明する。ビデオデータ２０はビデオ分割３２とビデオ圧縮３４の機能に委ねられるが、これもまた、詳細に説明する。合成ディジタルライブラリ３６は索引されたオーディオデータのテキスト転換３８、および分割され、圧縮されたオーディオ／ビデオデータ４０を含む。ディジタルライブラリはまた、索引されたテキストおよび分割され、圧縮されたビデオデータを含む。ディジタルライブラリ３６はディジタルビデオライブラリシステム１０のオフライン部分12の出力であるディジタルライブラリ３６がオンライン部分１４によって利用され、そして商業的環境において、アクセスされ、あるいはユーザにとって利用可能になる。
  次に、ディジタルビデオライブラリシステム１０のオフライン部分１２では、ディジタルライブラリ３６はユーザワークステーション４２で利用可能である。ワークステーション４２は好ましいことに音声コマンドとテキスト自然言語問合わせの両者を認識し、それらのどちらも自然言語探究機能１２９9を呼び出すであろう。対話型ビデオ分解機能４６によってビデオセグメント４８はディジタルライブラリ３６から検索される。ビデオセグメント４８はワークステーション４２で見ることができて、将来の利用のために、選択的に格納される。
　システム１０のオフライン部分12はソフトウエアで実現されて、１５０ＭＩＰＳ　ＤＥＣ　Ａｌｐｈａワークステーションあるいは他の同様なマシンで作動して、自動的にディジタルライブラリを発生できる、ということを読者は理解するであろう。本発明の教示に従って、一旦、ディジタルライブラリ３６が作成されると、それはどんな通常の記憶媒体にでも格納することができる。システム１０のオンライン部分１４はソフトウエアで実現され、そして、以下で述べるような様々なネットワーク構成によって、ディジタルライブラリ３６にアクセスを持つ様々な異なるマシンで作動することができる。あるいはまた、ネットワーク環境はディジタルライブラリ３６へのより大きいアクセスを認めてはいるが、「オンライン」部分は独立モードで実現することができる。
  ディジタルライブラリの作成
  内容は、話（音声と言語）および画像の両方で伝達される。画像、音声、そして自然言語理解技術の協力的相互作用によってのみ、本発明は、納得のゆく再現率および精度で、様々なビデオコレクションを、自動的に分布させ、分割し、索引し、そして探索することができる。このアプローチは、誤りの多い、曖昧なデータ環境における解釈および探索の諸問題を独自に補正する。」（１８頁１２行〜１９頁１８行）、
ク　「オーディオ転換と時刻記録機能２７
  第２図では、第１図の音声と言語解釈機能２８は、オーディオ転換と時刻記録機能２７および自然言語解釈機能２９によって実現される。オーディオ転換と時刻記録機能２７のオーディオ転換部分は、自動音声認識における既知の技術を利用して、オーディオデータ１８のディジタル化バージョンに作用して、話しと会話を自動的に転換する。例えば、Ｓｐｈｉｎｘ−ＩＩ音声認識システムを利用できると都合がよいかもしれない。Ｓｐｈｉｎｘ−ＩＩシステムは、カーネギーメロン大学で開発された語葉の豊富な、話者独立型、連続音声認識装置である。現在、Ｓｐｈｉｎｘ−ＩＩシステムは約２０，０００語の語棄を利用して、多くの異なる話者が話した関連する発言を認識する。Ｓｐｈｉｎｘ−ＩＩ音声認識システムは、ファン（Ｈｕａｎｇ）の、Ｓｐｈｉｎｘ−ＩＩ音声認識システム、概要、コンピュータと音声言語、（１９９３）でより詳細に記述されており、ここで引用される。しかし、当業者に理解されるように、人による転換あるいは、限定字幕付き番組の場合、単に番組そのものから字幕を利用することを含む、その他の転換方法も利用することができる。機能２７のオーディオ転換部分によって発生され転換はユーザによって見られる必要はなく、隠しておくことができる。
  誤り率の改善を予想することができて、同様に、教育アプリケーションのために有用なビデオ場面は、典型的に高いオーディオ品質のものとなり、そして容易に誤りの少ない転換になる熟練したプロによって語られるであろう。しかし、ビデオライブラリの予想サイズのために、より豊富な語葉が予想される。ビデオライブラリの豊富な語量は、それだけで、認識率を劣化させ、誤りを増加する傾向がある。応答において、オーディオ転換機能の誤りを低減するために、幾つかの革新的技術が開発され、利用されている。
  話題にもとづいた用語集および関心度ランクづけ語集のような、番組特定情報の使用は、機能２７のオーディオ転換部分によって利用されると好都合である。語の仮定は、既知の適応型、「長距離」言語モデルを使用することによって改善される。さらに、複文文脈を考慮することができるような複数パス認識処理が実行される。
  さらに、時刻記録を適用する既知の技術を利用する機能２７によって、転換は時刻記録されるであろう。オーディオ時刻記録は、以下で説明するように、後続の検索のために、処理されたビデオに関連する時刻記録と位置合わせされるであろう。
  このディジタルビデオライブラリシステム１０は、人の読み取れる転換を発生するのに必要とされるであろうものより高い誤り率を黙認することが期待される。また、オンラインスクリプトおよび、利用できれば、限定字幕付けが、認識のための基本ベース語彙および探索可能テキストを提供するために利用されると、好都合であるかもしれない。
  良好な実施例において、機能２７のオーディオ転換部分は通常、第３Ａ図で示されるように、４つの既知の段階で、発言を処理する。枠５２で表わされる第１段階は、音声依存コードブックを持つ、語間セノニック半連続音響モデルおよびバイグラム言語モデルを利用する順方向時間同期パスである。順方向時間同期パス機能５２は１組の可能な語の発生を生じ、各語の発生は１つの開始時間と複数の可能終了時間とを持っている。次いで、同じシステム構成を利用する逆方向時間同期パス機能５４が実行される。逆方向時間同期パス機能５４の結果は、順方向時間同期パス５２で予測された各終了時間に対する複数の可能開始時間である。段階５６では、近似Ａ＊アルゴリズムを利用して、順方向時間同期パス５２と逆方向時間同期パス５４の結果から、発語に対する１組のＮ−最良仮定を発生する幾つかの言語モデルのどれでも段階５６で適用することができる。トリグラム言語モデルがデフォルトであると、好都合である。この近似Ａ＊アルゴリズムは、最初に最良−スコアリング仮定を発生するとは保証されていない。最後に、段階５８では、最良−スコアリング仮定が、発生されたＮ−最良リストから選択される。最良−スコアリング仮定が、オーディオ転換機能２７からの出力として段階５８から出力される。このように発生された時刻記録転換は、以下で述べるように、自然言語解釈機能２９に送られる。
  機能２７のオーディオ転換部分は、当然、生じるような誤りと可変性の原因の多くをアドレスすることができる。例えば、複数の信号対雑音比によっで提出された問題に関して、オーディオ転換機能は、そのような可変性を自動的に修正する、信号の前処理および早期検出を含む信号適応技術を利用する。複数の未知のマイクロフォンによって起こる問題に関しては、オーディオ転換機能は動的マイクロフォン適応技術を利用して、誤りを低減することができて、新しいマイクロフォンを再教育しなくてもよい。よどみない話し方についての問題に関しては、現在、唯一の既知技術は、博識な言語に通じている人々を利用して、用語集を手動で適応することである。機能２７のオーディオ転換部分は、既知のエキスパートシステムを利用して、そのような言語に通じた人々の知識に基づいたタスク領域を、自動発音学習が行われることができるように公式化することができる。
  拡張した語葉に関連する問題に関しては、長距離言語モデルにおける当研究は、以前の発話の中で最近観察された語に基づいた語葉を動的に適応することによって、精度の２０％から３０％の改善を実現できたことを示している。さらに、多くの放送ビデオ番組は、利用できるかなり写実的なテキストを持っている。これらには、ドラマ構成と呼ばれる番組設計の初期描写、作業スクリプト、番組を描写する抄録、および字幕が含まれる。これらの資源は組み合わせられて、オーディオ転換機能によって利用される辞書に貴重な付加部分を与える。ディジタルビデオライブラリシステム１０の作成部分１２は代表的にオフラインで実行されるので、処理時間は高い精度と交換され、よって大きい、連続して拡張する辞書および一層計算集約型言語モデルを利用することができる。この技術によって達成できる誤り率は、語葉要件が増大しても、１２％から１５％に達するであろう。そしてコンピュータ技術、探索技術および音声処理技術が進歩することによって、５％から６％に達するであろうと評価されている。」（２０頁５行〜２３頁１行）、
ケ　「自然言語解釈２９
  自然言語処理は、ディジタルビデオライブラリシステム１０の２つの部分で利用される、オフライン部分１２では、オーディオ３８の索引テキスト転換の作成に利用される最終転換を作成するために、そしてオンライン部分１４では、自然言語探索問合わせ１２９の公式化のために利用される、現存の検索研究は典型的に、新聞、電子アーカイブ、および他の「清浄な」ドキュメントの資料に集中しているが、複雑な問合わせ言語とは対照的に、自然言語問合わせは、描写された材料を直接に描写することができる。
  自然言語解釈機能２９は幾つかの既知の副機能を実行する。その第一は、第３Ｂ図で「集約」１５０と呼ばれていて、各視覚パラグラフ（「視覚パラグラフ」の概念は以下の、「内容に基づいた画像理解」と題する章で説明する）に対するオーディオトラックにおける語を分析することによって、そのビデオパラグラフに対する話しの主領域とテーマが決定される。集約を利用して、見出しあるいは、各ビデオパラグラフまたはセグメントの要約を発生することができて、アイコン、目次あるいは索引を作成するのに利用される。
  第２の機能は「タグ付け」１５２と定義され、当業者に既知のデータ抽出技術を利用して、サウンドトラックで挙げられた人々、場所、会社、組織および他の構成要素の名前を決定することができる。これによって、ユーザは、単一の問合わせによって特定構成要素に対するすべての参照事項を見つけることができる。
  第３の機能は転換修正１５４である。例えば Ｓｐｈｉｎｘ−ＩＩ辞書あるいは、別のオーディオ転換機能からの類似の辞書であってもよい音声知識ベースと組み合わせて、意味的そして統語的制約を利用して、若干の誤りの認識およびそのような誤りの修正が達成される。従って、転換修正機能１５４ は、音声認識誤りを修正されたオーディオの最終転換を、自動的に発生することができる。
  この自然言語解釈機能２９，１２９は既知の技術に基づいており、そして、例えば、統計技術あるいはエキスパートシステムに応用することができる。例えば、自然言語解釈機能２９は、カーネギーメロン大学において開発されたスカウトシステムで具体化されている。他の自然言語インタプリタまたは処理装置は当業者には周知であり、そしてそれに対して利用することができる。スカウトシステムは全テキスト情報記憶および検索システムであり、そしてまた、情報検索およびデータ抽出技術のためのテストベッドとしても役立つ。自然言語解釈機能２９はまた、オーディオ転換と時刻記録機能２７によって発生された転換に適用されて、キーワードを識別することができる。この点での処理はオフラインで発生するので、自然言語解釈機能20は多くの処理時間という利点があり、それは理解を促進し、そして転換誤りを修正することができる。
  この目的言語解釈機能２９は当技術の幾つかの欠陥を解決する。第一に、自然言語解釈機能２９はパターン照合および構文解析を高めて、トークンストリングの誤りから回復し、それを修正する。機能２７のオーディオ転換部分によって発生された音声類似性測度を利用して、段階的ストリング類似性測度は、部分的照合を検索しかつ配列するのに利用される。」（２３頁２行〜２４頁１４行）、
コ　「音声と言語索引３０
  引き続き第１図および第２図について、音声と言語索引機能３０は自然言語解釈機能２０によって生成された最終転換に適用される。索引機能３０は当業者に周知の技術を利用する。例えば、各用語およびそのような用語が利用されている全場所のリストを含む逆索引が作成される。ポインター、すなわち時刻記録が、用語の各発生に対して、検索用に備えられる。
  音声と自然言語索引機能３０はまた、ビデオスキム性能を与えるのに有用である。ビデオスキム性能は、「ディジタルオーディオ／ビデオデータをスキムするためのシステムおよび方法」と題する米国特許（モールディン他の名前で本件と同時出願された）の主題であり、本書に引用される。本出願およびモールディン他の出願の両者は同じ実体によって保有される。
  オーディオデータ２０の処理の流れの最終結果は、テキストの索引された転換３８であり、それは将来の利用のためにディジタルライブラリ３６に格納される。」（２６頁８行〜２０行）、
サ　「ディジタルライブラリの探究
  対話型ユーザステーション４２
  第１図の対話型ユーザステーション４２は、好ましいことに、各セッションの大域ヒストリを保持するように装備されている。それは、セッションからのオリジナルディジタル化音声、機能２７のオーディオ転換部分によって認識された関連テキスト、自然言語処理機能１２９ によって発生された問合わせ、およびリターンしたビデオ対象、ユーザによって作成された合成、全ユーザ対話のログのすべてを含む。本質的に、ステーション４２は、総合統計的研究および詳細な個別プロトコル分析の両方を可能にする完全セッションを再生することができるであろう。
  最初の問合わせは、キーボードまたはマウスによって入力されたテキストの語、あいはワークステーション４２でマイクロフォンを介して入力されて、システム１０のオンライン部分１４によって認識された話された語、であることができる。後続する問合わせ、あるいは新規の関連問合わせの詳細化は、「同様な視覚背景をもつ画面を見つける」、のような視覚的属性に関することができる。スカウトプログラムによって例示される自然言語処理機能１２９は、自然言語処理機能２９が転換されたオーディオを処理するのに利用されたのとちょうど同様に、問合わせを処理するのに利用される。」（３１頁２３行〜３２頁１３行）、
シ　「第４図では、良好なネットワークアーキテクチャ80が示されている。ディジタルビデオ／オーディオアーカイブ８２は、トップ「メディアサーバ」ノード８４における全ディジタルデータ、および「サイトサーバ」ノード８８，９０，９２におけるごく最近アクセスしたメディアのキャッシュを有する階層的キャッシュファイルシステム、を持っている。トップメディアサーバノード８４は１テラバイトの容量を持ち、そしてサイトサーバノード８０，９０および９２の各々は４０から５０ギガバイトの容量を持っていると好都合である。トップメディアサーバノード８４は、標準ネットワーク接続における連続メディアデータを通信する国定優先政策スケジューラを持つ、ＵＮＩＸシステムでの多重スレッドユーザレベル処理として実現されると好都合である。
  「サイトサーバ」ノード８８，９０，９２は、エンドユーザ局所対話型ユーザワークステーション４２を持つローカルエリアネットに置かれている。ディジタルライブラリ３６の探索できる部分、すなわち、転換および補助索引、はトップメディアサーバノード８４にあり、そして各サイトにおいて反復可能である。これによって、ＣＰＵ集約探索が局所的に実行され、そしてメディアはサイトサーバ８８，９０，９２のローカルキャッシュからでも、あるいはトップメディアサーバノード８４からでも供給されることができる。局所対話型ユーザワークステーション４２は、そのサイズおよび性能クラスに依存して、緩衝表示ステーションでも、表示プラス探索エンジンでも、あるいは後者プラス、約２ギガバイトの容量を持つメディアキャッシュ９８であってもよい。キャッシュ戦略は、例えばトランザークのアンドリューファイルシステム（ＡＦＳ）およびＯＳＦの工業標準分散型ファイルシステム（ＤＦＳ）のような、標準ファイルシステム実現によって実現されるであろう。見ることの集中はシステムアーキテクチャに強い影響を与え、従ってアプリケーション依存である。どこで、どの程度キャッシュするかは、「見ることの局所性」に依存する。」（３４頁１１行〜３５頁８行）、
ス　「動作の概要
  以下の例は、仮定的探索に関連して、本発明の処理を説明している。ディジタルライブラリ３６はオフライン部分１２によって生成されているものとする。
  一人の学生は、モニタに話すことによって開始する、「カルチュアとサテライトに何かを一緒に置かなければなりません。それは何でしょう？」  ユーザに対してトランスペアレントであるので、ユーザワークステーション４２はこの問合わせについて、まさに、非常に正確な、話者独立の連続音声認識を実行した。次いで、ディジタルライブラリシステム１０のオンライン部分１４は精巧な自然言語処理機能１２９を適用して、問合わせを理解し、それを検索コマンドに翻訳して、分割された圧縮ビデオ４０の関連部分を位置指定する。分割圧縮ビデオ４０はテキスト３８の関連索引転換を利用して探索される。」（３６頁２７行〜３７頁９行）が記載されている。
　
　これらの記載ア〜ス及び図面図１〜図６によれば、刊行物１には、
「オーディオデータおよびビデオ画像からディジタルライブラリを作成し、該ディジタルライブラリから、「分割され、圧縮されたオーディオ／ビデオデータ」（４０）を検索するディジタルビデオライブラリシステムであって、該システムは、音声認識システムを利用して、オーディオデータを転換し、そして転換したオーディオデータに第１組の時刻記録を付ける手段（２７）と、転換したオーディオデータが索引つけされる前に、転換したオーディオデータを処理する自然言語インタプリタ手段（２９）と、当業者に周知の技術を利用した、各用語およびそのような用語が利用されている全場所のリストを含む逆索引が作成され、ポインタ、すなわち時刻記録が、用語の各発生に対して、検索用に備えられる、転換したオーディオデータを索引つけする手段（３０）と、システムのオンライン部分１４と、ディジタルライブラリに各自の組の時刻記録の付いた索引したオーディオデータのテキスト転換（３８）および「分割され、圧縮されたオーディオ／ビデオデータ」（４０）を格納する手段（３６）とを含み、該システムのオンライン部分１４において、精巧な自然言語処理機能（１２９）を適用して、問合わせを理解し、それを検索コマンドに翻訳して、「分割され、圧縮されたオーディオ／ビデオデータ」（４０）の関連部分が位置指定され、「分割され、圧縮されたオーディオ／ビデオデータ」（４０）が、テキスト（３８）の関連索引転換を利用して探索され、「分割され、圧縮されたオーディオ／ビデオデータ」（４０）が再生されることを特徴とするディジタルビデオライブラリシステム。」の発明（以下、「引用発明」という。）が記載されているといえる。
　
３．対比
　そこで、本件発明と引用発明とを対比すると、引用発明の「音声認識システムを利用して」、「オーディオデータ」、「時刻記録」及び「格納する手段（３６）」は、本願発明の「音声認識システムを用いて」、「記録音声」、「タイムスタンプ」及び「記憶する手段」に相当する。
　引用発明において、「用語ディジタルライブラリはオフライン部分１２によって作成されたデータベース３０を指す」（２．引用例　カの記載）のであるから、引用発明の「ディジタルライブラリ」は、本願発明の「データベース」に相当する。
　引用発明の「分割され、圧縮されたオーディオ／ビデオデータ」（４０）はオーディオデータ及びビデオ画像を記録した情報であり、上位概念化すると、「記録音声を含む情報」といえ、本願発明の「記録音声」は該「記録音声を含む情報」の下位概念であるといえる。
　引用発明の「検索するディジタルビデオライブラリシステム」は、「探索するシステム」といえる。
　引用発明の「オーディオデータを転換」は、その転換したオーディオデータが「オーディオデータのテキスト転換（３８）」、「テキスト（３８）」であることから、「オーディオデータをテキスト（データ）に変換」を意味するといえるので、本願発明の「記録音声をテキストに変換」に相当する。
　引用発明の「転換したオーディオデータを索引つけする手段」は、本願発明の「変換された記録音声のテキストから索引を作成する手段」に相当する。
　引用発明の「システムのオンライン部分１４」は、「精巧な自然言語処理機能（１２９）を適用して、問合わせを理解し、それを検索コマンドに翻訳して、「分割され、圧縮されたオーディオ／ビデオデータ」（４０）の関連部分が位置指定され、「分割され、圧縮されたオーディオ／ビデオデータ」（４０）が、テキスト（３８）の関連索引転換を利用して探索され、「分割され、圧縮されたオーディオ／ビデオデータ」（４０）が再生されることを特徴とする」のであるから、本願発明の「作成された索引を用いて、探索する手段」に相当し、また、引用発明は、生のビデオ材料中の特定の内容が、全部の生のビデオ材料を聴取することなく、特定の「分割され、圧縮されたオーディオ／ビデオデータ」を指し示す索引を用いて再生されるものであるといえる。
　
　したがって、本願発明と引用発明は、「データベース内の記録音声を含む情報を探索するシステムであって、
　音声認識システムを用いて、前記記録音声をテキストに変換する手段と、
　索引を作成する手段と、
　前記作成された索引を用いて、探索する手段と、
　記録音声を含む情報と作成された索引を前記データベースに記憶する手段と、
　を含み、前記記録音声を含む情報中の特定の内容が、全部の記録音声を含む情報を聴取することなく、特定の記録音声を含む情報を指し示す索引を用いて再生されるシステム。」の点で一致し、以下の点１〜４で相違する。
　
　相違点１
　本願発明では、探索する「記録音声を含む情報」が、「記録音声」である対して、引用発明では、「分割され、圧縮されたオーディオ／ビデオデータ」である点。
　相違点２
　本願発明では、音声認識システムを用いて、「記録音声をテキストに変換する手段」が、「変換音声内で自然に発生する途切れが、複数のタイムスタンプを提供するために使用される」のに対して、引用発明では、「転換したオーディオデータに第１組の時刻記録を付ける」点。
　相違点３
（１）本願発明では、「索引を作成する手段」が、「情報エクステンダを用いて、前記変換された記録音声のテキストから前記記録音声のフル・テキスト索引を作成する手段であって、前記フル・テキスト索引が、前記記録音声内での単語の出現を指し示す前記複数のタイムスタンプを含む、前記作成する手段」であるのに対して、引用発明では、「当業者に周知の技術を利用した、各用語およびそのような用語が利用されている全場所のリストを含む逆索引が作成され、ポインタ、すなわち時刻記録が、用語の各発生に対して、検索用に備えられる、転換したオーディオデータを索引つけする手段」である点。
（２）また、本願発明では、「作成された索引を用いて、探索する手段」が、「フル・テキスト・サーバにより、前記作成されたフル・テキスト索引を用いて、前記変換されたテキストを探索する手段」という構成を備えるのに対して、引用発明では、その構成が示されていない点。
（３）加えて、本願発明では、「記録音声を含む情報と作成された索引をデータベースに記憶する手段」が記憶するものは、「前記探索されたテキスト、前記フル・テキスト索引、及び前記記録音声」であるのに対して、引用発明では、「各自の組の時刻記録の付いた索引したオーディオデータのテキスト転換（３８）および分割され、圧縮されたオーディオ／ビデオデータ」である点。
　相違点４
　本願発明では、「前記記録音声を含む情報中の特定の内容が、全部の記録音声を含む情報を聴取することなく、特定の記録音声を含む情報を指し示す索引を用いて再生される」システムが、「前記記録音声中の特定の内容が、全部の記録音声を聴取することなく、前記複数のタイムスタンプにより特定の時点における記録音声を指し示す前記フル・テキスト索引を用いて再生される」システムであるが、引用発明では、その構成が示されていない点。
　
４．当審の判断
　以下、相違点１〜４について検討する。
　相違点１について
　引用発明の「分割され、圧縮されたオーディオ／ビデオデータ」は、オーディオデータ及びビデオ画像を記録した情報であって、引用発明で、特定の「分割され、圧縮されたオーディオ／ビデオデータ」が再生される場合には、特定のオーディオデータ及びビデオ画像が検索され再生されるといえるから、引用発明は、特定のオーディオデータが探索され再生される技術思想を内在しているといえる。そして、引用発明は、特定の「分割され、圧縮されたオーディオ／ビデオデータ」が検索され再生されるために、記録音声が探索されるための各構成を含むものであるといえる。
　また、情報処理の技術分野において、特定の記録音声を探索し再生する技術課題は、一般に知られていることである。
　なお、本願の特許請求の範囲請求項２１には「前記記録音声がビデオを含む，請求項１２記載のシステム」という記載がある。
　してみると、引用発明において、「分割され、圧縮されたオーディオ／ビデオデータ」を検索するに代え、「記録音声」を探索することは、当業者が容易に想到できたことである。
　
　相違点２について
　引用発明は、音声認識システムを利用して、オーディオデータを転換し、そして転換したオーディオデータに第１組の時刻記録を付ける手段（２７）を含むものであるが、引用例には、時刻記録に関し、「さらに、時刻記録を適用する既知の技術を利用する機能２７によって、転換は時刻記録されるであろう。」（２．引用例（１）クの記載参照。）の記載がある。
　ところで、話者のスピ−チ等を記録再生すること自体は周知な技術事項であるが、その中で、スピーチ等の中で、自然に発生する途切れ（無音区間）に着目して、音声を管理する技術が当業者に知られている（例えば、特開平１１−２５１１２号公報参照。）。受信した通話内容毎に管理することも知られている（例えば、特開平３−２７４９５０号公報参照。）。音声データ毎に管理することも知られている（例えば特開平６−４５９８号公報参照。）。そして、自然に発生する途切れ（無音区間）が、タイムスタンプを提供するために使用されるといえる技術も知られている（例えば特開２０００−６７０６３号公報、特開２０００−６７０６４号公報参照。）
　さらに、ＶｉａＶｏｉｃｅＴＭ音声認識システムなどの転記エンジンに適用されて，タイムスタンプ付き語の転記ファイルが生成されることも知られている（例えば特開２０００−３４８０６４号公報参照。）。この様な構成であれば、各語毎のタイムスタンプを比較することにより、変換後のデータから自然に発生する途切れ（無音区間）を推定することができることは明らかである。
　なお、念のため、「変換音声内で自然に発生する途切れが、複数のタイムスタンプを提供するために使用される」の技術的意義について、本願明細書発明の詳細な説明を参酌しても、段落番号０００５に「本システム及び方法は、音声認識システムを用いて、記録音声をテキストに変換するステップを含む。音声が変換されているとき、自然に発生する言語の途切れが、記録から時間索引を取り出すために使用される。」、段落番号００１２に「図２は、データベースを介して記録音声を探索するプロセスを示すフローチャートである。本発明に従うシステム及び方法は、記録音声が次のように探索されることを可能にする。最初に、例えばＤＢ２オーディオ・エクステンダを用いて、記録音声が索引ツールに記憶される（ステップ２０２）。次に、Via Voiceなどの音声認識システムを用いて、記録音声がテキストに変換される（ステップ２０４）。この変換の間、変換音声内で自然に発生する途切れが、複数のタイムスタンプを提供するために使用される。次に、ＤＢ２テキスト情報システムなどの情報エクステンダを用いて、記録音声のフル・テキスト索引が作成される（ステップ２０６）。最後に、テキストが、言語探索機能を有するフル・テキスト探索サーバにより探索され（ステップ２１０）、テキスト索引が提供される。こうした探索サーバには、ＤＢ２テキスト・エクステンダなどがある。テキスト索引は、記録音声内での単語の出現を指し示すタイムスタンプを含む。このようにして、全部の記録を聴取することなく、特定の内容が再生される。その後、探索テキスト、フル・テキスト索引及び記録音声がデータベースに記憶される（ステップ２１２）。」、段落番号００１４に「図３は、本発明に従う再生プロセスの１例を示す。再生プロセスはテキスト索引３０２を使用し、これはタイムスタンプ３０６ａ乃至３０６ｄにより、特定の時点における記録音声３０４を指し示す。このプロセスの可能な状況には、ａ）ボイスメール・システムに記憶されるボイスメールを探索する状況、ｂ）内容（すなわち電話の会話）を後に使用可能にするために、記録セッションを探索する状況、ｃ）内容を後に立証するために、記憶された記録セッションを探索する状況、ｄ）フォイル（foil）上で使用可能でない、または講義が行われたときに聞き手が理解できなかった詳細を得るために、記録講義を探索する状況、及びｅ）特定の情報をみいだすために、テレビ番組の記録放送番組または音声トラックを探索する状況が含まれる。」と記載があるとおりであり、「変換音声内で自然に発生する途切れが、複数のタイムスタンプを提供するために使用される」の技術的意義は、この文言とおりに解釈するほかない。
　してみると、引用発明において、上述した各事項を採用し、音声認識システムを用いて、「記録音声をテキストに変換する手段」が、「変換音声内で自然に発生する途切れが、複数のタイムスタンプを提供するために使用される」こととすることは、当業者が容易になし得たことである。
　
　相違点３について
（１）引用発明における「索引つけする手段」は、当業者に周知の技術を利用した、各用語およびそのような用語が利用されている全場所のリストを含む逆索引が作成され、ポインタ、すなわち時刻記録が、用語の各発生に対して、検索用に備えられる、転換したオーディオデータを索引つけする手段（３０）である。
　そして、情報処理の技術分野においては、フル・テキスト検索は広く知られた技術であり、また、検索の利便性を高めるため、予めフル・テキスト索引を作成することは慣用手段となっている。
　また、索引が、本文中のその索引用語の位置あるいはその用語が含まれる文、段落、頁を示す位置（アドレス）を、直接的あるいは間接的にタイムスタンプで表すことは、時刻情報を含むデータの検索においては、普通に行われていることである（例えば特開２０００−６７０６３号公報、特開２０００−６７０６４号公報参照。）。
　なお、索引作成手段（プログラム）として、ＩＢＭ社製ＤＢ２テキストエクステンダーは周知なものである。該手段（プログラム）を「情報エクステンダ」と呼称することは適宜なし得ることである。
　してみると、引用発明の「索引つけする手段」に上記各事項を採用し、「情報エクステンダを用いて、前記変換された記録音声のテキストから前記記録音声のフル・テキスト索引を作成する手段であって、前記フル・テキスト索引が、前記記録音声内での単語の出現を指し示す前記複数のタイムスタンプを含む、前記作成する手段」としたことは、当業者が、容易になし得たことである。
　
（２）引用発明は、システムのオンライン部分１４において、精巧な自然言語処理機能（１２９）を適用して、問合わせを理解し、それを検索コマンドに翻訳して、「分割され、圧縮されたオーディオ／ビデオデータ」（４０）の関連部分が位置指定され、「分割され、圧縮されたオーディオ／ビデオデータ」（４０）が、テキスト（３８）の関連索引転換を利用して探索されるものである。
　引用発明において、「分割され、圧縮されたオーディオ／ビデオデータ」を検索するに代え、「記録音声」を探索することは、上記「相違点１について」で述べたとおりであり、また、フル・テキスト索引を作成する手段を用いることも、上記（１）で述べたとおりであるが、その際、これらを踏まえれば、引用発明が、フル・テキスト索引を用いて、変換されたテキストを探索する手段を、更に備えればよいとすることは、阻害する特段の要因もなく、当業者が自然に推考できることである。
　また、引用例には、探索を、ネットワークに拡張し、サーバにより行う構成が記載されている（２．引用例　シの記載参照。）から、サーバにより行うことが示唆されているといえる。該サーバを、「フル・テキスト・サーバ」と呼称することは適宜なし得ることである。
　してみると、引用発明に上記各事項を採用し、「作成された索引を用いて、探索する手段」として「システムのオンライン部分１４」に代え、「フル・テキスト・サーバにより、前記作成されたフル・テキスト索引を用いて、前記変換されたテキストを探索する手段」という構成を備えることとすることは、当業者が、容易になし得たことである。
　
（３）引用発明は、ディジタルライブラリに各自の組の時刻記録の付いた索引したオーディオデータのテキスト転換（３８）および分割され、圧縮されたオーディオ／ビデオデータを格納する手段（３６）とを含むものである。
　引用発明において、「分割され、圧縮されたオーディオ／ビデオデータ」を検索するに代え、「記録音声」を探索することは、上記「相違点１について」で述べたとおりであり、また、フル・テキスト索引を作成する手段を用いることも、上記（１）で述べたとおりであり、更に、変換されたテキストを探索する手段をそなえることも、上記（２）で述べたとおりであり、その際、データベースに記憶する手段に記憶する情報として、これらを対象とし、作成し、探索した情報とすることは、当業者が格別困難無く推考できることである。
　してみると、引用発明に上記各事項を採用し、「記録音声を含む情報と作成された索引をデータベースに記憶する手段」が記憶するものは、「前記探索されたテキスト、前記フル・テキスト索引、及び前記記録音声」としたことは、当業者が、容易になし得たことである。
　
　相違点４について
　引用発明は、生のビデオ材料中の特定の内容が、全部の生のビデオ材料を聴取することなく、特定の「分割され、圧縮されたオーディオ／ビデオデータ」を指し示す索引を用いて再生されるものである。
　引用発明において、「分割され、圧縮されたオーディオ／ビデオデータ」を検索するに代え、「記録音声」を探索することは、上記「相違点１について」で述べたとおりであり、また、記録音声内での単語の出現を指し示す前記複数のタイムスタンプを含むフル・テキスト索引を作成する手段を用いることも、上記「相違点３について（１）」で述べたとおりであり、フル・テキスト索引を用いて、変換されたテキストを探索することは、上記「相違点３について（２）」で述べたとおりである。
　してみると、引用発明に上記各事項を採用し、「前記記録音声中の特定の内容が、全部の記録音声を聴取することなく、前記複数のタイムスタンプにより特定の時点における記録音声を指し示す前記フル・テキスト索引を用いて再生される」こととすることは、当業者が、容易になし得たことである。
　
５．むすび
　以上のとおり、本願発明は、刊行物１に記載された発明に基づき当業者が容易に発明することができたものであるから、特許法第２９条第２項の規定により特許を受けることができない。
　したがって、本願は、他の請求項に記載された発明について検討するまでもなく、拒絶されるべきものである。
　よって、結論のとおり審決する 。