「インタラクション，99」 平成11年3月

Multimedia＿AIDE：
マルチメディアデータを用いる思考支援システム
西本一志

間瀬健二

（株）ATR知能映像通信研究所〒619−0288京都府相楽郡精華町光台2−2
Tbl．0774−95−1401，酌Ⅸ．0774−95−14（娼emai1：‡knishi，maSe）＠mic・atr・CO・jp

いついた瞬間にそれを簡便に記録し保存でき，さらにその保存したデータを容易にシステムに入力可能であるこ1 はじめにとが求められる．由井薗ら【4］は，PDA（PefsonalDigi−
talAssistants）を用いることによって，いつでもどこで近年，各分野において知的生産性の向上が急務となっており［1】，その支援を目指すツールが多数研究開発さもひらめきを記録保存し，保存した情報をシステムヘ容れている【2］．筆者らも，従来から主にオフィスやコミュ易に入力できるようにすることを試みている．しかしなニティなどでのグループによる創造的思考活動を支援

がら，PDAでは通常手書きによるテキスト入力を用いする環境るため，依然として入力の手間が解決できておらず，紙AIDE（AugmentedInformative Discus−SionEnvironment）の研究開発を進めてきた【3］．AIDEと鉛筆を使う場合よりもむしろ作業効率は悪化する可能は，オンライン・チャット・システムをベースとするコ性が高い．この点，もっとも人力と記録の手間が少ない

ンピュータ会議システムの一種であるが，単なるオンラのは，音声の録音および写真撮影であろ第三は，発想においては，同じ情報についても多角的イン対話機能の提供にとどまらず，創造的思考過程を広な見方をすることが必要なことである．このため，一つ範に支援する機能を多数具備している．のアイディアの素材を複数のメディアで表現する機能が従来のAIDEは，コンピュータのキーボードか．ら利用ある方が望ましい．

者によってタイプ入力された，テキストデータ

第四は，ある状況，たとえば通勤の途上のどこかでなの自然言語文（章）のみを取り扱い対象としていた．
本稿では，これに加え，さらに画像や音などを含むマ

んらかのアイディア素材をひらめいたような場合，そのルチメディアデー夕をも取り扱えるように拡張した，思いつきを得た場の状況を併せて記録保存しておくこと

MultimediarAIDEについて紹介する．

が意味を持つ可能性が考えられることである．つまり，2 マルチメディアデータの必要性源である「何か」を，そのアイディアと併せてそのままその状況に存在した，そのアイディアをひらめかせた記録しておくのである．これによって，そのひらめきに創造的思考の支援において，以下のような理由でマル至った思考の過程を抽出することが可能となると期待でチメディアデータを使用可能であることが求められる．

きる．これは，以後の創造的思考における貴重なノウハ

第一は，アイディアの素材を常に言語的に表現可能でウとなあるとは限らないことである．特にアイディア創造の初はないが，画像や音によって記録する方がはるかに容易期の段階などでは，情報を図あるいは音として表現できかつ正確となる場合が多々あるであろう事は想像に難くることが求められる場合が多いと思われる．

ない．また，画像で記録した状況情報は，そのまま対応

第二は，テキストデータを基礎とするシステムでは，するひらめき情報を指し示すアイコンとして使える．

そのデータの件成と入力の手間がネックとをり使い勝手が悪くなりがちなことである．時に創造という作業で3 Multirpedia−AIDEの実装は，ひらめきはいつ得られるかわからない．そして，思3．1 AIDEの概要
Multimedia−AIDE‥A Creativity Support SystemUsing Multiq
mediaData．

KazushiNISHIMOTOandKenjiMASE

まず，従来のAIDEにおける機能のごく一部を簡略に説明する．詳細は，文献【3］などを参照されたい．

ATRMediaIntegration＆CommunicationsResearchLaborato−

AIDEは，オンラインチャットシステムに各種の思ries

考支援機能を付加したものである．図1に，一般的な−155−

識システムVia Voiceを利用した．同じ音声データから得られたオーディオデータとテキストデータは相互に関連づけて保存されるので，たとえばDV上である発言のアイコンを指定すると，テキストデータを表示することも，オーディオデータを再生することもできる．また，オーディオデータのキーワードは，対応するテキス
トデータから抽出する．なお，音声以外の音情報も同様に入力可能であるが，この場合のキーワード付与は，利用者が別途手作業で行うことになる．

第二に，映像データの入力を可能とした．映像データは，近年普及の著しいデジタルカメラから入力する．映像データに付与するキーワードは，音声以外の音データの場合と同様，利用者が別途手作業で入力する．ただし，音声を同時に記録できるデジタルカメラを使い，映図1：AIDEの利用者画面例

像データと音声データを関連づけて入力すれば，前述の音声認識システムを用いることにより，キーワード付与

AIDEの利用者画面を示す．図中の左側のウインドウはも自動化することができる．また，映像データが付与さチャットウインドウである．利用者が，このウインドウれている情報では，その映像データに基づくサムネール

内の発言入力ウインドウから発言内容をタイプ入力し，を生成し，これをその情報のアイコンとして使える．まウインドウ最下部の発言ボタンを押すと，その発言内容た，デジタルカメラに限らず，スキャナなどから手措きがテキストデータとしてAIDEサーバに送信され，さら画像を入力することももちろん可能である．
以上により，第2節で述べた要請に相応した．に全利用者のクライアントに送信される．クライアントが受信した各発言は，その発言者名と発言時刻ととも4 おわりにに，発言履歴ウインドウに追加表示される．

一方で，サーバでは各発言に形態素解析を施し，重本稿では，創造的思考支援システムにおけるマルチみ付きキーワード群を抽出する．次いで統計処理によっメディアデータの必要性を示し，筆者らが従来から開発て，発言とキーワードの共起・共有関係を二次元空間上を続けている創造的思考支援環境AIDEのマルチメディの発言・キーワードの位置関係として表現する．これがア化について述べた．今後はM111timedia，AIDEの試用国中の右側に示したDiscussion Viewer（DV）である．

実験を進めていきたい．また，状況画像ア

DVの構造を観察することにより，利用者は対話の話題配置による，アイディアの素材獲得の「源」情報を用い構造や見逃している情報などを知ることができる．各発た，新たな創造性支援の可能性も検討したい．

言に対応するアイコンには，その発言の発言者名と，その発言者による何番日の発言であるかを示す通し番号が参考文献表示されている．このアイコンの表示は，対応する発言【1］野中郁次郎，竹内弘高（薯），梅本勝博（訳）：知テキスト冒頭の数文字に変更することも可能である．こ

識創造企業，東洋経済新報社（1996）．の他，DVの空間を個人の視点に基づき再構成すること【2】囲藤進：オフィスにおける知的生産性向上のためので思考の精錬化を支援するPersonalDesktop，対話の知識創造方法論と知的創造支援ツール，人工知能学

話題の展開状況を監視し，対話が膠着状態に陥ったとき

会誌，Vol．14，No．1，pp．50−57（1999）．に新奇な視点からの情報を提供し，話題転換を促すCon−【3】西本一志，角康之，門林理恵子，間瀬健二，中津良

versationalistなどの機能がある．

平：マルチエージェントによるグループ思考支援，

電子情報通信学会論文誌D−Ⅰ，Vol．J81−D−Ⅰ，No．5，

3．2 Multimedia−AIDEへの拡張

pp．478−487（1998）．

第2節で述べた問題を考慮し，M111timedia−AIDEで【4】由井薗隆也，青野孝，宗森純，長滞庸二：知的生は，以下の機能拡張を行っている．．

産支援システムⅥhdamanを用いたKJ法の実施，第一に，音データの入力を可能とした。音声データ

マルチメディア，分散，協調とモーバイルワーク

は，そのままオーディオデータとして入力・保存するとショップ（DICOMO）シンポジウム論文集，情報処

同時に，音声認識システムによってテキストデータとし理学会，pp．415−422（1998）．ても入力する．音声認識には，IBMが開発した音声認−156−