「インタラクション2000」平成12年2月

EnhancedRoom：没入型ディスプレイにおける情報検索システム
EnhanCedRoom：InfbrmationRetrievalSysteminanImmersiveDisplay

中西泰入
電気通信大学大学院情報システム学研究科e−mail：naka＠is．uec．acjp
YasutoNAKANISHI
Univ．ofElectro＿Communications
Abstract：ThispaperlntrOducesaninfbrmationretrievalsysteminanimmersivedisplay，Ca11edEnhancedRoom．Itlinksinforma−tionretrievalando叫ect（booksorcatalogs）retrieval，andlinksinformationspacesandtherealspace．Theuserplacesinfbrmation

iconsorphysicalobjectswith2DbarcodesinEnhancedRoom．Theirrelativepositionsmakearoleofaquerytodatabase．Itshows

newinformationiconsandnewlinks．Theshownlinksarenotonlybetweeninformationiconsbutalsobetweeninformationindif托rentinformationresourcesintherealspaceorinfbrmationspaces．て，関連した情報と情報の関連性がユーザに提示さ1．はじめに電子的なメディアと紙や本，オブジェクトなどの物れる．その種類は以下の4つである．

理的なメディアをシームレスに続合するAugmented■ データベースにおけるリンク

Reality（以下AR）に関する研究が盛んに行われている【Wellner］［Rekimoto】［Underkoffler］．本研究では，没入型ディスプレイの一つであるCAVE（TM）を用い，ユーザはCAVE内のアイコンの位置を変更し，情報の関連性をリンクとして構築することで，ビジュアルクエリーを作成する．その検索結果として，新たなアイコンおよびリンクが提示される．

実空間と情報空間を統合することを試みた情報検索システムを構築した．
没入型ディスプレイ内で情報検索を行う場合に，キーワードによる検索のみを用いるとは考えられないため，空間内に投影されたアイコンの位置関係を■ 情報から美空間のオブジェクトヘのリンク

ユーザが3次元マウスを用いてCAVE内のアイコンをクリックすると，関連した本が存在する場合には，CAVEの入り口手前に置かれた本棚に向かってリンクが映像的に提示される．

ユーザがインタラクティブに変更しビジュアルな｛ 美空間のオブジェクトから情報へのリンク
ユーザが本棚からマトリックスコードの貼られたクエリーを作成する情報検索システムを構築した［Nakanishi］．

本を手に取り机の上に置くと，CAVE内で相応したアイコンが本の垂直線上に提示され，また，HTMLファイルが机上のPCのブラウザ内に開かれる．本の位置情報はリアルタイムで取得されるため，本もアまた，CAVE内にアクリル板を天板とした机およびノートパソコンを配置し，AR的な環境を没入型ディスプレイ内に混在させた．机下部に置かれたカメラによる画像処理を行い，机上に置かれた本のIDおよび位置を認識する．関連情報をノートパソコンイコンと同様にビジュアルクエリーの一部を構成すで提示するとともに，本の位置情報をリアルタイムることができる．

で取得して対応したアイコンをCAVE内に提示することで，実物体と映像を併用したビジュアルクエ

■ 情報空間からより大きな情報空間へのリンク

Javaアプレットには開かれたHTMLファイルのリーの作成を可能にした．

キーワードがリストアップされ，選ばれたキーワー

2．システムドをサーチエンジンのキーワードとして用いることができる．
以降ではそれぞれついてより詳しく述べる．

2．1アイコンおよびリンクの提示

図1システム構成および外観

システムは，画像州力としてCAVEを用いるSGI社
製ONYX，カメラ入力から2次元コードの一つであるマトリックスコード［暦本】の画像処理を行うSGI
社製02，Javaサーバ，ブラウザ内で使用可能なクライアントであるJavaアプレット，によって構築されている（図1）．cAVEはNTTInterCommunication
Center（以下ICC）内のものを用い，プロトタイプの検索対象としてICCの常設展示や企画展などの美術

図2 アイコンの初期配置 図3操作後の配置の一例

情報検索システムにおける検索対象は，ICCの常設展や企画展の作品とした．初期状態では，常設展と作品を用いた．
CAVE内では．ユーザのインタラクションに応じして展示されている作品のアイコンが，美空間上と−157−

同じ配置でCAVE内に示される（図2）．ユーザは，3次元マウスを用いてアイコンをドラッグし，アイのキーワードはJavaアプレットからサーチエンジンコンの位置を変更する．ある一定の距離内にあるアイコンどうしはリンクで結合され，作品間のリンクの一つであるgooのキーワードとして直接用いることができる（図7）．cAVEが提示したリンクをきっかけとして得た新たな知識（本）を用いて関連したが更新される（図3）．リンクの長さが作品の関連の情報を獲得し，その情報とサーチエンジンを用いて度合いを表現するようにアイコンを配置することで，より多くの情報へのリンクを得ることで，様々な情報および観点を提供できると思われる．

ユーザが作品を観賞した後の感想，つまりユーザ各々の情報空間を構成してもらう．アイコンの距離の関係から遺伝的アルゴリズムを用いて，ユーザの観点を推定し，提示すべきアイコンが検索され，新たなリンクの長さを計算する．得られたリンクとばねモデルを用いて，アイコンが配置され，ユーザに提示される【Nakanishi］．

2．2 実物体と情報のリンクの捷示
図6 関連したHTML

図7 サーチエンジンを用

ファイルの提示いたキーワード検索Nl

3 おわりにHTML州OinPC 【本研究では，情報検索システムを構築するにあたって没入型ディスプレイを用い，本や本棚，空間と±：＝ゝくこ去空P

いった物理的なメディアとデータベースやWWWといった電子的なメディアを統合したシステムを構築

IccDCal¶e帽した．

様々なメディアと空間をCAVE内に統合し，視覚的なブラウジングだけでなく身体的なブラウジングを促すことで，新たな情報に遭遇するための機会を

図4 アイコンから実物体 図5 本の認識とアイコンへのリンクの提示および関連情報の提示提供できると思われる．
現時点では，検索対象をICCの美術作品としたが，関連した本が本棚にある場合には，ユーザが3次元実数のベクトルとして表現可能なデータであれば検マウスでアイコンをクリックすると，CAVEの入り索対象とすることが可能である．今後の課題として，口手前に置かれた本棚に向かってリンクが映像的にビジュアルクエリーを用いた検索システムの評価お提示される（図4）．情報空間にアクセスするだけでなく，実空間における情報群に対して身体的なブラウジング検索を行うことで，新たな情報に遭遇するための機会を提供できると思われる．

よび没入型ディスプレイにおける抽象的な情報の視覚化の評価を行う必要があると思われる．
謝辞

ユーザが本棚からマトリックスコードの貼られた2次元マトリックスコードを提供いただきました
SonyCSL暦本純一氏，qAVEを提供いただきました
NTrInterCommunicationCenterに感謝いたします．

本を手に取って，机上の上に置くと，机下部に設置したCCDカメラの入力から02がマトリックスコードを認識する．認識結果はONYXに送信され，そのIDに対応したアイコンがCAVE内に提示される．マトリックスコードの位置はリアルタイムで取得され，そのアイコンは本の位置の垂直線上に常に配置され

参考文献［Nakanishi］Nakanishi，Y．，AVisualQueryEstimatinga

る（図5）．そのため，実物体としての本もアイコン

ViewpointwithGeneticAlgorithmsfbranInfbrmationRe−と同様にビジュアルクエリーの一部を構成すること

trievalSysteminanImmersiveDisplay，TheThirdInter−ができ，本を移動させることでクエリーを更新することができる．
認識されたIDはJavaサーバにも送信され，相応しnationalWorkshoponFrontiersinEvolutionaryAlgo−rithms（2000）（toappear）．
【Rekimoto］Rekimoto，）．，Saitoh，M．，AugmentedSurfaces：

たHTMLファイルのURLが机上のPC内のJavaアプ

ASpatial1yContinuousWorkspaceforHybridCompuト

レットに送られ，ブラウザにそのHTMLファイルがingEnvironments，ProceedingsofCHI開かれる（図5）．
実物体としての情報を，異なる情報空間へフィードバックすることで，より多様な視点の喚起を促す

た拡張現実感システムの構成手法，インタラクティ

99（1999）．

【暦本】暦本純一，2次元マトリックスコードを利用しブシステムとソフトウェアIV，Pp．199−208，近代科学ことができると思われる．

社（1996）．

2．3 サーチエンジンを用いたリンクの捷示
ブラウザで提示される各HTMLファイルに村して事前にキーワードを付与する．それらはサーバからJavaアプレットにURLとともに送信され，アプレッ
ト内にリストととして表示される（図6）．それぞれ

ClpatedPixels：Real−WorldGraphicsintheLuminous【Underkoffler］Underkomer，）．，Ullmer，B．，Ishi，H．，Eman−
Room，ProceedingsSIGGRAPH■99（1999）．
［Wellner］Wellner，P．，TheDigitalDeskCalculator：Tan−gibleManipulationonaDeskTopDisplay，Proceedings
OfUIST−91（1991）．

−158−