(57)【要約】      （修正有）【課題】ユーザ間のコメントの類似性を的確に判定して、ユーザが付与したコメントと共に、それに類似するコメントを表示可能にする技術を提供する。【解決手段】画像上のある部位についてユーザがコメントをつけるためのシステムにおいて、対象物の各部位の構造や色、模様が属性情報として付加されている画像データ４３１を記録し、画像データから画像を生成する画像生成部４０１、画像表示手段４２、画像の特定の部位の指定を受けると共に、その部位についてのコメントを受理するコメント受理部４０２、指定された部位情報とコメントとを記録するコメント記録手段４０６、部位情報と画像データとを照合し、その部位における属性情報を抽出する属性情報抽出部４０３、複数のコメント間で属性情報同士を比較し、類似規則４３３に従ってコメント間の類似性を判定するコメント類似性判定部４０４、それらのコメント付き画像表示手段４２を備える。【選択図】図２
2010102595.tif 000002
【特許請求の範囲】
【請求項１】
コンピュータで表示される対象物の静止画像又は動画像（以下、画像）に対して、画像上の少なくとも特定の部位について単数又は複数のユーザがコメントをつけることのできるコメント付き画像表示システムにおいて、
対象物の各部位の構造、色、模様の少なくともいずれかの属性情報が付加されている画像データを記録する画像データ記録手段と、
該画像データから画像を生成する画像生成手段と、
該画像を表示する画像表示手段と、
該画像の特定の部位の指定を受けると共に、該部位についてのコメントを受理するコメント受理手段と、
該指定された部位情報とコメントとを記録するコメント記録手段と、
該部位情報と画像データとを照合し、その部位における属性情報を抽出する属性情報抽出手段と、
複数のコメント間で、該属性情報同士を比較し、所定の類似規則に従ってコメント間の類似性を判定するコメント類似性判定手段と、
少なくとも１つの該画像及びコメントと共に、その画像及びコメントに類似する画像及びコメントを表示するコメント付き画像表示手段と
を備えたことを特徴とするコメント付き画像表示システム。
【請求項２】
前記コメント付き画像表示システムが、ネットワークを介して接続されるサーバ装置及び端末装置からなる構成において、
該サーバ装置には、
前記画像データ記録手段と、前記コメント記録手段と、前記属性情報抽出手段と、前記コメント類似性判定手段と、該端末装置と通信するサーバ側通信手段と、
該端末装置には、
前記画像表示手段と、前記コメント受理手段と、前記コメント付き画像表示手段と、該サーバ装置と通信する端末側通信手段と、
をそれぞれ備えると共に、
前記画像生成手段を、該サーバ装置又は端末装置のいずれか一方に備えた
ことを特徴とする請求項１に記載のコメント付き画像表示システム。
【請求項３】
前記静止画像が、対象物に基づいて作成された３次元デジタルモデルであって、
前記画像表示手段において該３次元デジタルモデルを任意の位置及び向きで表示するように指定を受け付ける前記コメント受理手段と、
該指定された位置及び向きを仮想カメラデータとして記録する前記コメント記録手段と、
該仮想カメラデータに従って、指定された位置及び向きで画像及びコメントを表示するコメント付き画像表示手段と
を備え、
前記サーバ装置が、ユーザが使用する前記端末装置に、当該３次元デジタルモデルを表示・操作させる画面に、又はそれとは異なる所定のブログ用画面に、少なくともコメントの表示・入力が可能なブログサービスを前記ネットワークを介して提供する
ことを特徴とする請求項２に記載のコメント付き画像表示システム。
【請求項４】
前記画像データにおいて、対象物の各部位の構造について、1つ以上のノードとそのノードから分岐するアークを持つツリー構造における位置を属性情報として備え、
前記コメント類似性判定手段において、指定された部位情報における属性情報の該ノード又は該アークの位置関係に応じて類似性を判定する
ことを特徴とする請求項１ないし３のいずれかに記載のコメント付き画像表示システム。
【請求項５】
前記画像データにおいて、対象物の各部位の色を属性情報として備え、
前記コメント類似性判定手段において、指定された部位情報における属性情報の色の色相、彩度、明度の少なくともいずれかの値が近いほど類似性を高く判定する
ことを特徴とする請求項１ないし４のいずれかに記載のコメント付き画像表示システム。
【請求項６】
前記画像データにおいて、対象物の各部位の模様を属性情報として備え、
前記コメント類似性判定手段において、指定された部位情報における属性情報の模様が同一であるか、又は形状が類似している場合に類似性を高く判定する
ことを特徴とする請求項１ないし５のいずれかに記載のコメント付き画像表示システム。
【請求項７】
コンピュータで表示される対象物の静止画像又は動画像（以下、画像）に対して、画像上の少なくとも特定の部位について単数又は複数のユーザがコメントをつけることのできるコメント付き画像表示方法において、
対象物の各部位の構造、色、模様の少なくともいずれかの属性情報が付加されている画像データを記録する画像データ記録手段を備え、
コンピュータの画像生成手段が、該画像データから画像を生成する画像生成ステップ、
コンピュータの画像表示手段が、該画像を表示する画像表示ステップ、
コンピュータのコメント受理手段が、該画像の特定の部位の指定を受けると共に、該部位についてのコメントを受理するコメント受理ステップ、
コメント記録手段に該指定された部位情報とコメントとを記録するコメント記録ステップ、
コンピュータの属性情報抽出手段が、該部位情報と画像データとを照合し、その部位における属性情報を抽出する属性情報抽出ステップ、
コンピュータのコメント類似性判定手段が、複数のコメント間で、該属性情報同士を比較し、所定の類似規則に従ってコメント間の類似性を判定するコメント類似性判定ステップ、
コンピュータのコメント付き画像表示手段が、少なくとも１つの該画像及びコメントと共に、その画像及びコメントに類似する画像及びコメントを表示するコメント付き画像表示ステップ
を有することを特徴とするコメント付き画像表示方法。
【請求項８】
前記コメント付き画像表示方法が、ネットワークを介して接続されるサーバ装置及び端末装置により実行処理される構成において、
該サーバ装置には前記画像データ記録手段を備え、
該サーバ装置のサーバ側通信手段が前記画像データを該端末装置に送信して該端末装置の画像生成手段が前記画像生成ステップを行うか、
又は該サーバ装置の画像生成手段が前記画像生成ステップを行い、生成された画像をサーバ側通信手段が該端末装置に送信するか、
のいずれかの処理の後、
該端末装置において、
画像表示手段が前記画像表示ステップ、
コメント受理手段が前記コメント受理ステップ、
受理したコメントを該端末装置の端末側通信手段が該サーバ装置に送信し、
該サーバ装置において、
コメント記録手段に前記コメント記録ステップを実行し、
属性情報抽出手段が、前記属性情報抽出ステップ、
コメント類似性判定手段が、前記コメント類似性判定ステップ、
サーバ側通信手段が、該端末装置で表示する画像及びコメントと類似する画像及びコメントを該端末装置に送信し、
該端末装置のコメント付き画像表示手段が、前記コメント付き画像表示ステップ
を実行処理する請求項７に記載のコメント付き画像表示方法。
【請求項９】
前記静止画像が、対象物に基づいて作成された３次元デジタルモデルであって、
前記コメント受理ステップにおいて、前記コメント受理手段が、前記画像表示手段において該３次元デジタルモデルを任意の位置及び向きで表示するように指定を受け付け、
前記コメント記録ステップにおいて、前記コメント記録手段が、該指定された位置及び向きを仮想カメラデータとして記録し、
前記コメント付き画像表示ステップにおいて、前記コメント付き画像表示手段が、該仮想カメラデータに従って、指定された位置及び向きで画像及びコメントを表示することで、
前記サーバ装置が、ユーザが使用する前記端末装置に、当該３次元デジタルモデルを表示・操作させる画面に、又はそれとは異なる所定のブログ用画面に、少なくともコメントの表示・入力が可能なブログサービスを前記ネットワークを介して提供する
ことを特徴とする請求項８に記載のコメント付き画像表示方法。
【請求項１０】
前記画像データにおいて、対象物の各部位の構造について、1つ以上のノードとそのノードから分岐するアークを持つツリー構造における位置を属性情報として備え、
前記コメント類似性判定ステップにおいて、前記コメント類似性判定手段が、指定された部位情報における属性情報の該ノード又は該アークの位置関係に応じて類似性を判定する
ことを特徴とする請求項７ないし９のいずれかに記載のコメント付き画像表示方法。
【請求項１１】
前記画像データにおいて、対象物の各部位の色を属性情報として備え、
前記コメント類似性判定ステップにおいて、前記コメント類似性判定手段が、指定された部位情報における属性情報の色の色相、彩度、明度の少なくともいずれかの値が近いほど類似性を高く判定する
ことを特徴とする請求項７ないし１０のいずれかに記載のコメント付き画像表示方法。
【請求項１２】
前記画像データにおいて、対象物の各部位の模様を属性情報として備え、
前記コメント類似性判定ステップにおいて、前記コメント類似性判定手段が、指定された部位情報における属性情報の模様が同一であるか、又は形状が類似している場合に類似性を高く判定する
ことを特徴とする請求項７ないし１１のいずれかに記載のコメント付き画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンピュータで表示される対象物の画像に対して、画像上の少なくとも特定の部位について単数又は複数のユーザがコメントをつけることのできるコメント付き画像表示システム及び方法に関し、特に部位ごとにコメントを整理可能な技術に関する。
【背景技術】
【０００２】
近時、インターネット上において個人ユーザが手軽に情報発信できる手段として、ブログ（Ｂｌｏｇ：ウェブログ（Ｗｅｂｌｏｇ）の略称）が急速に発展、普及してきている（非特許文献１参照）。
ブログとは、狭義にはウェブ（Ｗｅｂ：Ｗｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂ）上のウェブページのＵＲＬに加えて論評や覚え書き等のコメントを記録（ｌｏｇ）しているウェブサイトを意味するが、最近では、作者の個人的な日記や特定のトピックスに関する話題等の必ずしもウェブに限定されない情報を時系列で記録したウェブサイト全般を指して、より広義にブログと称されている。
【０００３】
また、テキストデータから構成されるコメントに加えて又は代えて、デジタル写真を掲載できるようにしたフォトログ（ｐｈｏｔｏｌｏｇ）もブログの一種として普及している。さらにまた、デジタルビデオ画像をコンテンツとしたヴログ（ｖｌｏｇ：ｖｉｄｅｏｌｏｇ）等といったものもブログの一形態として登場してきている（非特許文献２参照）。
【０００４】
このような各種のブログでは、あるブログサイトを閲覧した他のユーザ又は当該サイト運営者自身がテキストからなるコメントや写真を追加したり、自分のブログで言及したことをＵＲＬリンクを登録することで通知する（一般に「トラックバック」と称される）ことができるようになっている。
【０００５】
インターネット上のブログに限らず、コンピュータで対象物のデザインや形状を議論するとき、あるいは映像などを論評するときに、ある部位を画面上で指示しながらそれに対してコメントを付けることもある。例えば、アドビシステムズ株式会社製Adobe Acrobat 9では、「注釈」機能を設けて、表示中の書類の任意の場所についてコメントを付加することができるようになっている。
【０００６】
本件出願人も、関連する技術として特許文献１、２に示す技術を提案している。これらにおいて、インターネットブラウザを利用して表示された３次元モデルの任意の部分に対してコメントをつけると、そのコメントが自動的にブログコンテンツに変換されてサーバに登録される。
【０００７】
特許文献１の技術は、対象物について作成された３次元モデルをウェブコンテンツとして簡易に閲覧、操作でき、３次元モデルの対象物に関する多人数の意見交換を容易にするものである。
特許文献２では、３次元モデルに対するユーザの視点を利用したブログ上での情報呈示、情報交換を可能とする技術を提案した。
【０００８】
【非特許文献１】「ｐｈｏｔｏｌｏｇ」の項目，ＩＴ用語辞典e-Words，株式会社インセプト，［２００８年９月５日検索］，インターネット＜ＵＲＬ：ｈｔｔｐ：／／ｅ−ｗｏｒｄｓ．ｊｐ／ｗ／Ｅ３８３９５Ｅ３８２Ａ９Ｅ３８３８８Ｅ３８３ＡＤＥ３８２Ｂ０．ｈｔｍｌ＞
【非特許文献２】ケイティ・ディーン（ＫａｔｉｅＤｅａｎ），「ビデオ＋ブログ『ブイログ』が流行の兆し」，２００５年７月１３日，ホットワイヤード・ジャパン，エヌ・ティ・ティ・レゾナント株式会社，［２００８年９月５日検索］，インターネット＜ＵＲＬ  ｈｔｔｐ：／／ｗｉｒｅｄｖｉｓｉｏｎ．ｊｐ／ａｒｃｈｉｖｅｓ／２００５０７／２００５０７１９０１．ｈｔｍｌ＞
【特許文献１】特開２００６−３３８０６５号公報
【特許文献２】特開２００７−２４１７６６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００９】
上記特許文献２の技術では、３次元仮想空間における視点・注視点の距離に基づいてユーザのエントリを関連づけて表示させることができるため、同じ３次元モデルでも視点が異なるものや、注視点が大きく離れている場合には、類似しないエントリと判断することができる。
しかし、対象物上では視点が類似していたり、注視点が近いからと言って、必ずしもコメントの話題が共通していないとは言えない。そのため上記の技術では、本来は類似するエントリとしなければならないコメントを完全には抽出しきれない問題があった。
【００１０】
本発明は、このような従来技術の有する問題点に鑑みて創出されたものであり、コンピュータで表示される対象物の静止画像や動画像上の特定の部位について、ユーザ間のコメントの類似性を的確に判定して、ユーザが付与したコメントと共に、それに類似するコメントを表示可能にする技術を提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明は、上記の課題を解決するために、次のようなコメント付き画像表示システムを提供する。
請求項１に記載の発明によれば、コンピュータで表示される対象物の静止画像又は動画像に対して、画像上の少なくとも特定の部位について単数又は複数のユーザがコメントをつけることのできるコメント付き画像表示システムを提供する。なお、本発明では静止画像又は動画像のいずれも対象とすることができ、以下ではこれらを単に画像と呼ぶ。
【００１２】
上記のシステムにおいて、対象物の各部位の構造、色、模様の少なくともいずれかの属性情報が付加されている画像データを記録する画像データ記録手段と、画像データから画像を生成する画像生成手段と、画像を表示する画像表示手段と、画像の特定の部位の指定を受けると共に、部位についてのコメントを受理するコメント受理手段と、指定された部位情報とコメントとを記録するコメント記録手段とを備える。これらの各手段によって、ユーザからのコメントを受け付ける。
【００１３】
次に、上記部位情報と画像データとを照合し、その部位における属性情報を抽出する属性情報抽出手段と、複数のコメント間で、属性情報同士を比較し、所定の類似規則に従ってコメント間の類似性を判定するコメント類似性判定手段と、少なくとも１つの画像及びコメントと共に、その画像及びコメントに類似する画像及びコメントを表示するコメント付き画像表示手段とを備える。
これらの構成によって、ユーザが入力したコメントに類似するコメント付き画像を表示する。
【００１４】
請求項２に記載の発明によれば、前記コメント付き画像表示システムが、ネットワークを介して接続されるサーバ装置及び端末装置からなる構成を用いる。
サーバ装置には、前記画像データ記録手段と、前記コメント記録手段と、前記属性情報抽出手段と、前記コメント類似性判定手段と、端末装置と通信するサーバ側通信手段とを備える。
また、端末装置には、前記画像表示手段と、前記コメント受理手段と、前記コメント付き画像表示手段と、サーバ装置と通信する端末側通信手段と、を備える。
そして、前記画像生成手段を、サーバ装置又は端末装置のいずれか一方に備えたことを特徴とする。
【００１５】
請求項３に記載の発明によれば、上記の静止画像が、対象物に基づいて作成された３次元デジタルモデルであって、画像表示手段において３次元デジタルモデルを任意の位置及び向きで表示するように指定を受け付けるコメント受理手段と、指定された位置及び向きを仮想カメラデータとして記録するコメント記録手段と、仮想カメラデータに従って、指定された位置及び向きで画像及びコメントを表示するコメント付き画像表示手段とを備える。
そして、サーバ装置が、ユーザが使用する端末装置に、３次元デジタルモデルを表示・操作させる画面に、又はそれとは異なる所定のブログ用画面に、少なくともコメントの表示・入力が可能なブログサービスを前記ネットワークを介して提供することを特徴とする。
【００１６】
請求項４に記載の発明によれば、前記画像データにおいて、対象物の各部位の構造について、1つ以上のノードとそのノードから分岐するアークを持つツリー構造における位置を属性情報として備え、前記コメント類似性判定手段において、指定された部位情報における属性情報のノード又はアークの位置関係に応じて類似性を判定することを特徴とする。
【００１７】
請求項５に記載の発明によれば、前記画像データにおいて、対象物の各部位の色を属性情報として備え、前記コメント類似性判定手段において、指定された部位情報における属性情報の色の色相、彩度、明度の少なくともいずれかの値が近いほど類似性を高く判定することを特徴とする。
【００１８】
請求項６に記載の発明によれば、前記画像データにおいて、対象物の各部位の模様を属性情報として備え、前記コメント類似性判定手段において、指定された部位情報における属性情報の模様が同一であるか、又は形状が類似している場合に類似性を高く判定することを特徴とする。
【００１９】
請求項７に記載の発明によれば、コンピュータで表示される対象物の静止画像又は動画像（以下、画像）に対して、画像上の少なくとも特定の部位について単数又は複数のユーザがコメントをつけることのできるコメント付き画像表示方法を提供する。
コンピュータを用いた該処理方法では、対象物の各部位の構造、色、模様の少なくともいずれかの属性情報が付加されている画像データを記録する画像データ記録手段を備えて、次の各ステップを実行処理する。
【００２０】
（Ｓ１０）コンピュータの画像生成手段が、画像データから画像を生成する画像生成ステップ、
（Ｓ１１）コンピュータの画像表示手段が、画像を表示する画像表示ステップ、
（Ｓ１２）コンピュータのコメント受理手段が、画像の特定の部位の指定を受けると共に、部位についてのコメントを受理するコメント受理ステップ、
（Ｓ１３）コメント記録手段に指定された部位情報とコメントとを記録するコメント記録ステップ、
（Ｓ１４）コンピュータの属性情報抽出手段が、部位情報と画像データとを照合し、その部位における属性情報を抽出する属性情報抽出ステップ、
（Ｓ１５）コンピュータのコメント類似性判定手段が、複数のコメント間で、属性情報同士を比較し、所定の類似規則に従ってコメント間の類似性を判定するコメント類似性判定ステップ、
（Ｓ１６）コンピュータのコメント付き画像表示手段が、少なくとも１つの画像及びコメントと共に、その画像及びコメントに類似する画像及びコメントを表示するコメント付き画像表示ステップ。
【００２１】
請求項８に記載の発明によれば、前記コメント付き画像表示方法が、ネットワークを介して接続されるサーバ装置及び端末装置により実行処理される構成を用いる。
サーバ装置には、前記画像データ記録手段を備え、サーバ装置のサーバ側通信手段が画像データを端末装置に送信して端末装置の画像生成手段が画像生成ステップを行うか、又はサーバ装置の画像生成手段が画像生成ステップを行い、生成された画像をサーバ側通信手段が端末装置に送信するか、のいずれかの処理を行う。
その後、端末装置において、画像表示手段が前記画像表示ステップ、コメント受理手段が前記コメント受理ステップ、受理したコメントを端末装置の端末側通信手段がサーバ装置に送信し、サーバ装置において、コメント記録手段に前記コメント記録ステップを実行し、属性情報抽出手段が、前記属性情報抽出ステップ、コメント類似性判定手段が、前記コメント類似性判定ステップ、サーバ側通信手段が、端末装置で表示する画像及びコメントと類似する画像及びコメントを端末装置に送信し、端末装置のコメント付き画像表示手段が、前記コメント付き画像表示ステップを実行処理する。
【００２２】
請求項９に記載の発明によれば、前記静止画像が、対象物に基づいて作成された３次元デジタルモデルであって、前記コメント受理ステップにおいて、コメント受理手段が、画像表示手段において３次元デジタルモデルを任意の位置及び向きで表示するように指定を受け付け、前記コメント記録ステップにおいて、コメント記録手段が、指定された位置及び向きを仮想カメラデータとして記録し、前記コメント付き画像表示ステップにおいて、コメント付き画像表示手段が、仮想カメラデータに従って、指定された位置及び向きで画像及びコメントを表示する。
これにより、サーバ装置が、ユーザが使用する端末装置に、当３次元デジタルモデルを表示・操作させる画面に、又はそれとは異なる所定のブログ用画面に、少なくともコメントの表示・入力が可能なブログサービスを前記ネットワークを介して提供することを特徴とする。
【００２３】
請求項１０に記載の発明によれば、前記画像データにおいて、対象物の各部位の構造について、1つ以上のノードとそのノードから分岐するアークを持つツリー構造における位置を属性情報として備え、前記コメント類似性判定ステップにおいて、コメント類似性判定手段が、指定された部位情報における属性情報のノード又はアークの位置関係に応じて類似性を判定することを特徴とする。
【００２４】
請求項１１に記載の発明によれば、前記画像データにおいて、対象物の各部位の色を属性情報として備え、前記コメント類似性判定ステップにおいて、コメント類似性判定手段が、指定された部位情報における属性情報の色の色相、彩度、明度の少なくともいずれかの値が近いほど類似性を高く判定することを特徴とする。
【００２５】
請求項１２に記載の発明によれば、前記画像データにおいて、対象物の各部位の模様を属性情報として備え、前記コメント類似性判定ステップにおいて、コメント類似性判定手段が、指定された部位情報における属性情報の模様が同一であるか、又は形状が類似している場合に類似性を高く判定することを特徴とする。
【発明の効果】
【００２６】
本発明は、上記構成を備えることにより次のような効果を奏する。
請求項１及び７に記載の発明によれば、対象物の各部位の構造や色、模様などの属性情報を用いて、ユーザがコメントした部位と、他のコメントが対象としている部位との類似性を判定することができる。
この方法では、例えば、対象物の表裏に同じ模様があって、その模様について議論をしている場合でも、正確に同一の話題であることを判定することができる。
【００２７】
請求項２及び８に記載の発明によれば、上記システムをサーバ装置及び端末装置から構成することができるので、特にインターネットのブログ等のウェブコンテンツを提供するサーバに組み込むことができる。多数の端末装置からアクセスすることで、複数のユーザが１つの対象物について意見を交換することができる。
【００２８】
請求項３及び９に記載の発明によれば、画像が静止画像の３次元デジタルモデルであるときに、仮想カメラデータを用いることで端末装置上の見え方を一致させることができ、スムーズな意見交換に寄与する。
【００２９】
請求項４及び１０に記載の発明によれば、属性情報にツリー構造における位置を用いることにより、体系的に構造を把握することが可能となる。これにより、実際の対象物上の距離に関わらず、機能的な同一性や、構造上の関連性を的確に考慮することができる。
【００３０】
請求項５及び１１に記載の発明によれば、属性情報に色の色相や彩度、明度を用いることで、対象物上の色合いを議題としている場合などにはユーザの感覚に近い類似性の判定を行うことができる。
【００３１】
請求項６及び１２に記載の発明によれば、属性情報に模様を用いることで、対象物上の距離が離れていても、同一な模様や模様の形状についての議論は類似したコメントとして抽出することができる。
本発明は、これらの属性情報を組み合わせて類似性を判定することにより、各コメントの共通点を見出し、意見交換の際に議論が自然に整理されるコメント付き画像表示システムを提供することができる。
【発明を実施するための最良の形態】
【００３２】
以下、本発明の実施形態を、図面に示す実施例を基に説明する。なお、実施形態は下記に限定されるものではない。
図１は、本発明のコメント付き画像表示システムの全体構成を示す説明図である。本発明では図示のようにインターネット（３）を介してサーバ装置（１）と端末装置（２）とからシステムを構成することもできるほか、１つのコンピュータ装置単体でシステムを構成することもできる。ここでは前者の場合を説明する。
【００３３】
サーバ装置（１）には、３次元モデル画像データ（１ａ）などの画像データが記録されている。この画像データに対して、ユーザが端末装置（２）からコメントを付けると、これを受け取り（１ｄ）、ブログの記事として、３次元モデルのどの部位を指しているか、どのような視線で３次元モデルを見ているか、などの情報と共にそのときのコメントをブログデータベース（１ｂ）として格納する。
そして、また別のユーザがそれについてコメントを付けようとすると、コメントを受理（１ｄ）して、ブログデータベース（１ｂ）から類似のコメントを検索し、表示（１ｅ）する処理を行う。
【００３４】
このとき本発明では、従来提案されてきた視線情報や、注視点の情報の類似だけでなく、対象物の構造や、色、模様などに注目して類似性を判定することができる。
この類似性の判定に用いる規則は、類似度データベース（１ｃ）に格納する。この類似度データベース（１ｃ）は、判定の規則だけを格納してもよいし、先に判定を行って、どのコメントとどのコメントが類似するかという結果を格納しておいてもよい。
【００３５】
本発明を最も簡便に実施するのは公知のブログシステムであり、すでに出願人が提案したような３次元ブログシステムに実装することができる。
しかし、例えば電子掲示板のように画像とコメントが同時に表示できるシステムに自由に組み込むことが可能である。画像も、３次元画像に限らず２次元画像でもよい。また、静止画像に限らず、動画像、音声付きの映像などでもよい。
【００３６】
図２に示すのは、前述したコンピュータ装置単体で本発明を実施する場合のシステムの構成図である。
本装置（４）は、公知のパーソナルコンピュータによって構成するのが簡便であり、周知のように、中央演算装置（ＣＰＵ）（４０）にこれと協働するメモリ（図示しない）を中心として、ユーザの入力手段であるキーボードやマウス（４１）、画面表示を行うモニタ（４２）、ハードディスクやフラッシュメモリなどの外部記憶装置（４３）等から構成される。
【００３７】
ＣＰＵ（４０）には機能に応じて、画像生成部（４０１）、コメント受理部（４０２）、属性情報抽出部（４０３）、コメント類似性判定部（４０４）、表示制御部（４０５）、記録処理部（４０６）がプログラムによって形成される。
また、外部記憶装置（４３）には、画像データ（４３１）、コメントデータ（４３２）、類似規則テーブル（４３３）が格納されている。
【００３８】
図３及び図４に示すのは、図１のようにネットワークを介して、サーバ装置（１）と端末装置（２）から本システムを構成するときの各装置の構成図である。
各装置もパーソナルコンピュータによって構成するのが簡便であり、必須の機構として、サーバ装置（１）にはＣＰＵ（１０）と、サーバ側通信手段であるネットワークアダプタ（１１）と、外部記憶装置（１２）とを設ける。また、端末装置（２）には、ＣＰＵ（２０）と、キーボード・マウス（２１）と、モニタ（２２）と、端末側通信手段であるネットワークアダプタ（２３）とを設ける。もちろん、その他の機構を備えていてもよい。
【００３９】
そして、図２に示した画像生成部（４０１）、コメント受理部（４０２）、属性情報抽出部（４０３）、コメント類似性判定部（４０４）、表示制御部（４０５）、記録処理部（４０６）を、それぞれサーバ装置（１）と端末装置（２）に分散して備える。
前者のＣＰＵ（１０）には、属性情報抽出部（１０１）、コメント類似性判定部（１０２）、記録処理部（１０３）、画像生成部（１０４）を備える。
後者のＣＰＵ（２０）には、コメント受理部（２０１）、表示制御部（２０２）を備える。
【００４０】
図２の構成が最も簡単であるが、以下ではネットワークを用いた構成として実施例の説明を続ける。コンピュータ装置単体で構成する場合については、本実施例と異なる場合にのみ言及する。
図５には、本発明のコメント付き画像表示方法のフローチャートを示す。
まず、記録処理部（１０３）が画像データ（１２１）（又は４３１）を読み出して画像生成部（１０４）（又は４０１）において画像を生成する（画像生成ステップ：Ｓ１０）。
【００４１】
ここで、画像を生成するとは、公知の方法によって読み出された画像データからモニタで表示可能なデータ形式に変換する処理のことを言い、例えばベクトルデータを解析して対象物の形状を表すモデルにする処理や、定義されたテクスチャデータを貼り込む処理、陰影を計算する処理なども含まれる。また、２次元の画像データがＪＰＥＧやＧＩＦ形式の場合に圧縮されたデータを復元する処理も含む。
【００４２】
本発明において、画像生成部（１０４）はサーバ装置（１）に備えてもよいし、端末装置（２）に備えてもよい。また両方に備えて処理を分散してもよい。
一般に、圧縮データを復元する処理は、端末装置のウェブブラウザソフトウェアに標準の機能として実装されており、通信量を削減するためにも圧縮データのままネットワークで送信されることが望ましい。
一方、３次元モデルの場合には、膨大な演算が必要となり、特に小型の端末装置などでは十分な演算性能を備えていないために、サーバ側でモデリング処理、レンダリング処理などを行うこともある。この場合には、すでにモデル化されたデータを端末装置側に送信する。
【００４３】
ところで、本発明で言う「３次元モデル」とは、コンピュータグラフィックスで作成された仮想的な３次元空間で表現される対象物のモデルである。なお、３次元モデルが作成され及びデジタル写真で撮影される対象物は、動産又は不動産の何れであってもよく、特に３次元モデルについては現存する物以外の物、例えば遺跡や出土品、昔の町並みや建物等を仮想的に復元したものであってもよい。
【００４４】
生成された画像はネットワークアダプタ（１１）（２３）を介して端末装置（２）の表示制御部（２０２）に送られ、この処理によりモニタ（２２）でユーザに対して表示する。（画像表示ステップ：Ｓ１１）
図１の構成では、表示制御部（４０５）がモニタ（４２）から直接表示する。
【００４５】
この画像についてコメントをつけようとするユーザは、マウス（２１）などの操作によってコメントを付けたい画像上の部位を指定すると共に、キーボード（２１）などからコメントを入力する。この時の画面の構成例を図６（ａ）に示す。
本実施例で用いる３次元ブログの画面では、左欄に対象物の３次元モデル（６１）が表示され、コメントを付ける部位を丸印（６０）で指定する。右欄（６２）には、件名、本文、日付、コメントの作者が順に表示される。
【００４６】
ブログの場合には、周知のようにサービスを利用するにあたって、ログイン処理などを行っているため、端末装置（２）でコメントを入力すると、自動的に作者が特定される。また、日付も自動的に付加される。
従って、ユーザＡは部位をマウス等（２１）で指定した後に、キーボード（２１）から件名と本文すればよい。ここでは急須の側面に「この部分のカーブをもっと丸く」とコメントを付けている。
【００４７】
入力されたコメントは、コメント受理部（２０１）で所定のデータ形式に整えられて、ネットワークアダプタ（２３）（１１）を介してサーバ装置（１）の記録処理部（１０３）がコメントデータ（１２２）として記録処理する。（コメント記録ステップ：Ｓ１３）
ここで記録されるデータ形式は、コメント受理部（２０１）が整えた形式のままでも、それをさらに変換した形式でもよいが、例えば表１のようなデータテーブルである。
【００４８】
【表１】
2010102595.tif 000003
【００４９】
上から、順にユーザを特定するユーザＩＤ（ウェブブラウザのcookieの情報でもよい）、件名、本文、日付に続いて、表示する画像データのファイル名を記録している。このファイル名は、画像データ（１２１）の所在を示す。また、画像上でどの部位を示しているかを示す情報を含み、例えば３次元座標である部位座標で表すこともできる。部位座標とせずに、後述するツリー構造の位置の名称などでもよく、このデータ形式は部位を表すことができる任意の形式でよい。
【００５０】
さらに、画像を表示する視線を指定するための３次元ベクトル値であるカメラパラメータを備えておくこともできる。
本発明の「仮想カメラ」とは、３Ｄ-ＣＧにおいて、３次元世界を描画（レンダリング）するために使用される仮想的なカメラであり、そのカメラから見えるはずのもの（３次元モデル）が画面に表示される。
「仮想カメラデータ」とは、このような「仮想カメラ」が描画に必要とするデータを含み、基本的には、３次元空間における位置と向きの情報から構成される上記「カメラパラメータ」が含まれる。仮想カメラデータは、カメラパラメータのみから構成されてもよいし、カメラパラメータに加えて、視野角に相当する値を含めることも可能であるし、これらのデータの他に、ＣＧソフトによるデータの表現形式の違いを認識するために当該ＣＧソフトの種類等の情報も含めたデータとすることができる。
【００５１】
本発明では、形状だけでなく、色や模様についてのコメントを付けることができるので、図６（ｂ）に示すように、ある模様が付けられた特定部位（６３）を示しながら、本文に「明るい柄にする」というようなコメント（６４）を付けてもよい。
この段階ではコメントデータとして違いは無いが、後述するコメントの類似性判定では処理が異なる。
【００５２】
図２の構成ではコメント受理部（４０２）が受理したデータを記録処理部（４０６）がコメントデータ（４３２）として記録する。ユーザを区別しない場合にはユーザＩＤは不要でもよい。
また、言うまでもなく２次元データの場合には、表１の座標は２次元座標でよく、カメラパラメータは無くてもよい。拡大縮小率や表示領域を示すパラメータを入れてもよい。
【００５３】
一番最初にコメントを書き込む各処理と、２番目以降にコメントを書き込む処理とは分けて考えることができる。すなわち、１番目のユーザがコメントを書き込む処理はここで終了することもできる。
一方、すでに複数のコメントが書き込まれている場合には、本発明の要点である類似したコメントの判定処理に進む。図５において右側に表す各処理である。
【００５４】
コメントデータ（１２２）が記録されると、属性情報抽出部（１０１）（又は４０３）がユーザが指定した位置の属性情報を抽出する。（属性情報抽出ステップ：Ｓ１４）
本発明の属性情報とは、その部位における構造、色、模様のいずれかや、それらの組み合わせを指す。
【００５５】
まず属性情報に構造を用いる場合には、ツリー構造上の位置を画像データ（１２１）に格納するのが好適である。
すなわち、例えば図７（ａ）に示す机の３次元モデルがあるときに、図７（ｂ）のように「机」を最上位のノードとして、そこからアーク（枝）が伸び、構成要素である「天板」「引き出し」「脚」の各ノードに分かれる。
「天板」は１つの部品として天板（７１）を表す一方、「引き出し」ノードは、３次元モデルの部品である引き出し左（７２）、引き出し右（７３）にアークが分かれる。同様に「脚」も脚１（７４）、脚２（７５）、脚３（７６）、脚４（７７）にそれぞれ分かれる。
【００５６】
一般に３次元モデルの画像データでは、すでに各パーツの名称やツリー構造が定義されていることは一般的であり、本発明ではその情報を用いればよいが、各部品の形状を比較して同一形状は同じグループに分類したり、部品間の接続の有無を検出して、自動的にツリー構造を計算するようにしてもよい。
【００５７】
属性情報抽出部（１０１）は、コメントデータ（１２２）に含まれる部位の情報が、いずれのアークを指しているのかを調べて、ツリー構造と共にツリー構造上の位置、例えばアークの名前などを抽出する。
【００５８】
また、属性情報に色を用いる場合には、画像データ（１２１）に含まれるその部位の指定色を抽出する。
一般に、画像データには形状と共に、着色する色が指定されており、本発明ではその色情報を抽出すればよい。具体的には、ＲＧＢ（赤・青・緑）やＣＭＹＫ（シアン・マゼンタ・イエロー・色調）などの色の表現形式に従って値を決めている。
部位の座標から、例えばその画素の色を抽出することで属性情報抽出処理を行うことができる。
【００５９】
さらに、画像データ（１２１）において色を計算によって算出する方法で定義している場合、例えば３次元モデルにおいて陰影などを計算して着色している場合には、属性情報抽出部（１０１）が描画とは別に計算を行ってもよいし、画像生成部（１０４）が着色した結果の値を取得して属性情報としてもよい。
さらに、本発明では陰影、光沢などの効果を施す前の指定色を属性情報とすることもできる。
【００６０】
属性情報に模様を用いる場合には、画像データ（１２１）に含まれる、その部位に定義された模様（テクスチャ）を抽出することもできる。
公知のように、テクスチャは３次元モデルの表面に、壁紙のように貼り付けられ、表面の質感を忠実に再現するための手法である。テクスチャが用いられる場合には、実際には存在する凹凸をポリゴンを用いることなく表現することがある。
本発明はそれに限らず、単に意匠として模様を施す場合も含む。
属性情報抽出部（１０１）は、指定された部位における模様を定義するファイル名や、その部位の周辺の実際の画像を抽出する。例えば、指定部位を中心に、半径１００ピクセル以内の画像、というように抽出すればよい。
【００６１】
以上のようにして属性情報を抽出した後、コメント類似性判定ステップ（Ｓ１５）に進む。ここでは、記録処理部（１０３）（又は４０６）が類似規則テーブル（１２３）（又は４３３）を読み出し、コメント類似性判定部（１０２）（又は４０４）が２つ以上のコメントの類似性を判定する。
類似性規則（１２３）において、表２のような規則が定義されているとする。
【００６２】
【表２】
2010102595.tif 000004
【００６３】
コメント類似性判定部（１０２）では、まず対象物が同一か否かによって類似度を算出することができる。例えば、２つのコメント間で同一のファイル名の画像データを用いる場合には、両者は同一の対象物であるから、類似度を１０と設定する。同じ「急須」と名前が付けられていてもファイル容量が違うなど、違うデータの場合には、類似度を５と設定する。同じ種類、たとえば食器などの分類が定義されていて、その分類が同じ場合には、類似度を１と設定する。
もちろん、表２の規則の定義方法は一例であって、任意に設計することができる。画像から抽出できる任意のパラメータを用いる計算式を定義しておき、その計算から類似度を算出してもよい。
【００６４】
属性情報で構造が抽出されたときにも、規則に従って、類似度を算出する。
例えば、図８に示すようにユーザＡが書いた記事と、ユーザＢ、ユーザＣが書いた記事の類似性を比較する場合、ユーザＡは急須の側面を、ユーザＢは急須の取っ手を、ユーザＣは急須の側面についてそれぞれコメントしていることが抽出される。
この場合、従来の方法によると注視点の物理的な距離を比較するため、ユーザＡとユーザＢの注視点が近く、ユーザＡとユーザＣは遠いことから、類似性は図８の並び順となる。
【００６５】
しかし、構造情報によると、急須の場合には、急須という幹のノードから、外周側面、内周側面、取っ手、注ぎ口、蓋などの各ノード・アークに分かれる。この分類によれば、ユーザＢのコメントの属性は「取っ手」であり、他は「外周側面」となる。
従って、類似性規則に従って、ＡのコメントとＣのコメントは類似度を５倍とし、同じ急須であれば類似度は５０、ＡのコメントとＢのコメントは、１つ上位のノード「急須」が一致しているため類似度を３倍して３０となる。
以上のような計算により、属性情報が構造の場合には、ユーザＡとユーザＣのコメントの類似性が高く、Ｂのコメントとの類似性は低く算出される。
【００６６】
属性情報に色が抽出された場合には、その色相・彩度・明度を比較する。色相・彩度・明度が同一の場合には、全く同じ色についてのコメントなので類似度を５倍とするなどの処理をする。
パラメータ値の誤差を計算して類似の色の場合には類似度を高くすることもできる。
さらに、上記の構造の類似度の値に対して、色の類似度の計算を行って、組み合わせの類似度を算出することもできる。
【００６７】
属性情報に模様が抽出された場合について図９を用いて説明する。
図９のおいてユーザＡは模様の付けられた部位について「明るい柄にする」とコメントを付けている。ユーザＢは、「ここにも模様をつけてはどうか」、ユーザＣは「より細かい模様に変更」と記入した。
従来の方法では、指示部位がより近いＢが類似していると判定されるが、ＡとＣが模様の内容について議論しているのに対して、Ｂは新たに別の部位に模様を付けることを提案している。従って、ＡとＣの方が話題としての類似性は高いことになる。
【００６８】
そこで、本発明では、Ａのコメントの属性情報として模様のファイル名が抽出されており、Ｃでも同じファイル名が抽出されることから、同一データとして類似度を５倍にする計算を行う。ＡとＢとでは類似度は増加しない。これによって、ＡとＣとの類似度を高くする計算処理が実現される。
【００６９】
模様については、ファイル名やデータの比較から、同一であることは簡便に検出できるが、それが異なる場合には検出は難しい。しかし、例えば画像に含まれる色の平均値など、色合いや濃さが近い場合には、類似していると判定することや、画素が周期的に現れるかどうかを比較し、その周期が近いものの類似度を高く算出することもできる。
また、公知の画像マッチング技術などを用いることで、２つ以上の画像の類似性を判定する技術が多数提案されている。本発明ではそのような公知の技術を用いて高精度に模様の類似性を判定してもよい。
【００７０】
本発明では、このコメント類似性判定ステップ（Ｓ１５）を新しくコメント付き画像を表示する毎に計算してもよいし、計算された結果を、例えばコメントデータ（１２２）に各コメントと合わせて記録しておき、コメント付き画像を表示する際にはその結果に基づいて、類似するコメントを表示するようにしてもよい。
【００７１】
いずれの場合にも、類似するコメント同士について、画像データ（１２１）とコメントデータ（１２２）を記録処理部（１０３）で読み出して、表示制御部（２０２）でモニタ（４２）から表示する。（コメント付き画像表示ステップ：Ｓ１６）
このとき、計算された類似度に従って、上から順に並べて表示してもよいし、ある閾値以上類似しているものを日付順で並べるようにしてもよい。
【００７２】
本発明のコメント付き画像表示システムは以上の通りの構成を備える。最後に、３次元モデルを表示するブログサービス（以下、３次元ブログ）における処理の詳細を説明する。
図１０には、３次元ブログを機能別に説明したフローチャートを示す。また、詳細な入出力、処理の流れを図１１に示す。
まず、画像生成手段である３次元モデルデータ出力部（３０１）で３次元モデルを生成して、画像表示手段及び入力手段である３次元モデル表示・操作及び選択部（３０２）でユーザが画像を選択したり、向きの操作などを行う。
次いで、ユーザが選択した領域や視線などの情報を取得する情報取得部（３０３）やテキスト入力部（３０４）を、キーボード・マウス及びその入力処理を司るＣＰＵから成る入力手段で構成して、コメントとしてコメント受理手段であるデータ取得部（３０５）が取得する。
【００７３】
同じくコメント受理手段の一機能であるエントリ生成部（３０６）が、ブログの新たなエントリを生成し、ブログサービスを実現するプログラムを用いてブログサイト構築部（３０７）が画面構成を構築する。
ユーザの端末装置のコメント付き画像表示手段であるブログページ表示部（３０８）で記事を表示する。
【００７４】
他のユーザが、そのブログのＵＲＬを指定した場合には、ＣＰＵ（１０）に備えたＵＲＬ解析部（３０９）がその表示画面のＵＲＬを解析し、３次元シーンパラメータ決定部（３１０）でそのコメントが付いている３次元モデルの注視点や視線の値を決定する。
そして、そのユーザの画像生成手段で表示したり、操作・選択を受け付ける（３１１）。
【００７５】
一方、データ取得部（３０５）から、ブログを閲覧したり新たなエントリを行うユーザーにおいては、まず類似エントリ検索部（３１２）がブログが含まれたデータベース（図１のブログデータベース（１ｂ）、図３のコメントデータ（１２２）にそれぞれ対応）から類似するエントリを検索する。この処理では、ブログの記事の件名や含まれるキーワードに基づいて、同じような話題のブログを検索する。これは通常のブログサービスと同様の処理である。
【００７６】
そして、属性情報抽出手段である類似性判定基準選択部（３１３）がどのような基準で類似性を判定するか決定し、コメント類似性判定手段であるエントリ取得部（３１４）がエントリを取得する。
そして、新しく記事を入力したユーザのブログについて、エントリ追加通知部（３１５）がエントリの追加を通知し、当該ユーザのブログを閲覧する際にブログページ表示部（３１６）でブログに同時に表示される。
【００７７】
ユーザ側の操作から見た本処理の流れを図１１により説明する。
まず、ブログサービスにログインするために、端末装置でユーザＩＤやパスワードを入力する（Ｓ１２０）。
ブログのサーバ装置ではユーザ認証の処理（Ｓ１２１）を行い、ユーザが選択した画像について、３次元モデルデータベース（画像データ）から３次元モデルのデータを抽出する（Ｓ１２２）。これを、端末装置に向けて送信する（Ｓ１２３）。
端末装置ではデータの受信（Ｓ１２４）後、３次元モデルを画面表示して、ユーザがマウスなどを使って自由に動かせるようにする（Ｓ１２５）。
【００７８】
例えば、モデル上でクリックする（Ｓ１２６）と、クリックされた場所を検出して、その時の３次元モデルの位置、向きを取得する（Ｓ１２７）。
さらに、画面上の登録ボタンを押下（Ｓ１２８）することで、その場所の情報、モデルの位置・向きをサーバ装置に送信（Ｓ１２９）する。
【００７９】
コメントについては、ユーザが適すと入力用ウィンドウを開き（Ｓ１３０）、コメントを入力した後、そのテキストデータをサーバ側に送信（Ｓ１３１）する。
指定された部位の情報、仮想カメラデータ、記事はコメントとしてサーバ側に送られ、サーバ装置がこれらのデータを取得（Ｓ１３２）する。
【００８０】
まず、図１０でも示したように通常のブログサービスとしてブログサイトを構築し、表示することができる（Ｓ１３３）。
また、受理したコメントから、属性情報としてレンダリング（貼り付けられたテクスチャなど）の情報や、論理構造を利用して類似エントリを検索（Ｓ１３４）する。
類似エントリと共に、ユーザＩＤや日付などの情報も取得（Ｓ１３５）して、そのエントリやユーザに対して、新しく入力されたエントリを通知する（Ｓ１３６）。
このようにして関連付けられた記事をブログとして表示（Ｓ１３７）する。
【００８１】
以上に説明した本発明の実施例は一例であって、上記実施形態に限定されない。例えば上記システムの一部のみを利用したり、各部の具体的構成を部分的に変更するなど、本発明の趣旨を逸脱しない範囲で種々変形が可能である。
【図面の簡単な説明】
【００８２】
【図１】本発明によるコメント付き画像表示システムの全体構成図である。
【図２】本発明のコメント付き画像表示システムが単体の場合の構成図である。
【図３】本発明のコメント付き画像表示システムにおけるサーバ装置の構成図である。
【図４】本発明のコメント付き画像表示システムにおける端末装置の構成図である。
【図５】本発明のコメント付き画像表示方法のフローチャートである。
【図６】本発明における画面構成の１例である。
【図７】本発明におけるツリー構造の説明図である。
【図８】本発明における画面構成の１例である。
【図９】本発明における画面構成の１例である。
【図１０】本発明を３次元ブログに適用する場合の機能別フローチャートである。
【図１１】本発明を３次元ブログに適用する場合の入力・操作・処理のフローチャートである。
【符号の説明】
【００８３】
４  コメント付き画像表示システム
４０  ＣＰＵ
４０１  画像生成部
４０２  コメント受理部
４０３  属性情報抽出部
４０４  コメント類似性判定部
４０５  表示制御部
４０６  記録処理部
４１  キーボード・マウス
４２  モニタ
４３  外部記憶装置
４３１  画像データ
４３２  コメントデータ
４３３  類似規則テーブル
【図１】
2010102595.tif 000005
【図２】
2010102595.tif 000006
【図３】
2010102595.tif 000007
【図４】
2010102595.tif 000008
【図５】
2010102595.tif 000009
【図６】
2010102595.tif 000010
【図７】
2010102595.tif 000011
【図８】
2010102595.tif 000012
【図９】
2010102595.tif 000013
【図１０】
2010102595.tif 000014
【図１１】
2010102595.tif 000015