(57)【要約】【課題】  情報端末から共有画面のメニュー操作を行う場合において、共有画面と情報端末のどちらの画面を見ての操作においても、操作性と視認性を向上させることを目的とするものである。【解決手段】  情報端末１０３から表示装置１０１の共有画面上のカーソルの操作を行い、メニューを表示させるための座標指示およびメニュー表示指示を行うメニュー表示指示手段と、表示装置１０１にメニューを表示する表示手段と、表示装置１０１および情報端末１０３の表示装置１０１上に表示するメニューの情報を記憶するメニュー記憶手段と、メニュー記憶手段により記憶されたメニューを、情報端末表示用に変換するメニュー変換手段と、共有画面と前記端末表示手段のメニュー上のカーソル位置の座標変換を行う座標変換手段と、前記変換されたメニューを前記情報端末に表示させる表示手段と、を有する画像処理装置等を提供する。【選択図】  図１
2006108911.tif 000002
【特許請求の範囲】
【請求項１】
表示装置と情報端末に接続され、前記表示装置は前記情報端末から操作可能な共有画面を表示し、前記情報端末は前記共有画面を表示する端末表示手段を有する画像処理装置において、
前記情報端末から前記共有画面上のカーソルの操作を行い、メニューを表示させるための座標指示およびメニュー表示指示を行うメニュー表示指示手段と、
前記表示装置にメニューを表示する表示手段と、
前記表示装置および情報端末の表示装置上に表示するメニューの情報を記憶するメニュー記憶手段と、
メニュー記憶手段により記憶されたメニューを、情報端末表示用に変換するメニュー変換手段と、
共有画面と前記端末表示手段のメニュー上のカーソル位置の座標変換を行う座標変換手段と、
前記変換されたメニューを前記情報端末に表示させる表示手段と、
を有することを特徴とする画像処理装置。
【請求項２】
前記画像処理装置は、
前記情報端末の表示能力を示す表示デバイス情報を取得するためのデバイス情報取得手段と、
デバイス情報を記憶するデバイス情報記憶手段と、
を備え、
前記メニュー変換手段は、前記デバイス情報に基づいてメニューを変換することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記デバイス情報は、前記情報端末が表示可能な縦幅、横幅からなる解像度から構成されることを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記座標変換手段は、メニューが表示されている間のメニュー上以外の座標指示を無効とする手段を有することを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
【請求項５】
前記座標変換手段は、メニューが表示されている間のメニュー上以外の座標指示をメニュー領域内の座標指示へ補正する手段を有することを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
【請求項６】
表示装置と情報端末に接続され、前記表示装置は前記情報端末から操作可能な共有画面を表示し、前記情報端末は前記共有画面を表示する端末表示工程を有する画像処理方法において、
前記情報端末から前記共有画面上のカーソルの操作を行い、メニューを表示させるための座標指示およびメニュー表示指示を行うメニュー表示指示工程と、
前記表示装置にメニューを表示する表示工程と、
前記表示装置および情報端末の表示装置上に表示するメニューの情報を記憶するメニュー記憶工程と、
メニュー記憶工程により記憶されたメニューを、情報端末表示用に変換するメニュー変換工程と、
共有画面と前記端末表示工程のメニュー上のカーソル位置の座標変換を行う座標変換工程と、
前記変換されたメニューを前記情報端末に表示させる表示工程と、
を有することを特徴とする画像処理方法。
【請求項７】
前記画像処理方法は、
前記情報端末の表示能力を示す表示デバイス情報を取得するためのデバイス情報取得工程と、
デバイス情報を記憶するデバイス情報記憶工程と、
を備え、
前記メニュー変換工程は、前記デバイス情報に基づいてメニューを変換することを特徴とする請求項６に記載の画像処理方法。
【請求項８】
前記デバイス情報は、前記情報端末が表示可能な縦幅、横幅からなる解像度から構成されることを特徴とする請求項６又は７に記載の画像処理方法。
【請求項９】
前記座標変換工程は、メニューが表示されている間のメニュー上以外の座標指示を無効とする工程を有することを特徴とする請求項６乃至８のいずれか１項に記載の画像処理方法。
【請求項１０】
前記座標変換工程は、メニューが表示されている間のメニュー上以外の座標指示をメニュー領域内の座標指示へ補正する工程を有することを特徴とする請求項６乃至９のいずれか１項に記載の画像処理方法。
【請求項１１】
表示装置と情報端末に接続され、前記表示装置は前記情報端末から操作可能な共有画面を表示し、前記情報端末は前記共有画面を表示する端末表示手段を有する画像処理装置を制御するプログラムであって、
コンピュータに、
前記情報端末から前記共有画面上のカーソルの操作を行い、メニューを表示させるための座標指示およびメニュー表示指示を行うメニュー表示指示手順と、
前記表示装置にメニューを表示する表示手順と、
前記表示装置および情報端末の表示装置上に表示するメニューの情報を記憶するメニュー記憶手順と、
メニュー記憶手順により記憶されたメニューを、情報端末表示用に変換するメニュー変換手順と、
共有画面と前記端末表示手順のメニュー上のカーソル位置の座標変換を行う座標変換手順と、
前記変換されたメニューを前記情報端末に表示させる表示手順と、
を実行させるためのプログラムを記憶したことを特徴とするコンピュータ読み取り可能な記憶媒体。
【請求項１２】
前記画像処理装置は、
前記情報端末の表示能力を示す表示デバイス情報を取得するためのデバイス情報取得手段と、
デバイス情報を記憶するデバイス情報記憶手段と、
を備え、
前記メニュー変換手順は、前記デバイス情報に基づいてメニューを変換することを特徴とする請求項１１に記載のコンピュータ読み取り可能な記憶媒体。
【請求項１３】
前記デバイス情報は、前記情報端末が表示可能な縦幅、横幅からなる解像度から構成されることを特徴とする請求項１１又は１２に記載のコンピュータ読み取り可能な記憶媒体。
【請求項１４】
前記座標変換手順は、メニューが表示されている間のメニュー上以外の座標指示を無効とする手順を有することを特徴とする請求項１１乃至１３のいずれか１項に記載のコンピュータ読み取り可能な記憶媒体。
【請求項１５】
前記座標変換手順は、メニューが表示されている間のメニュー上以外の座標指示をメニュー領域内の座標指示へ補正する手順を有することを特徴とする請求項１１乃至１４のいずれか１項に記載のコンピュータ読み取り可能な記憶媒体。
【請求項１６】
表示装置と情報端末に接続され、前記表示装置は前記情報端末から操作可能な共有画面を表示し、前記情報端末は前記共有画面を表示する端末表示手段を有する画像処理装置を制御するプログラムにおいて、
コンピュータに、
前記情報端末から前記共有画面上のカーソルの操作を行い、メニューを表示させるための座標指示およびメニュー表示指示を行うメニュー表示指示ステップと、
前記表示装置にメニューを表示する表示ステップと、
前記表示装置および情報端末の表示装置上に表示するメニューの情報を記憶するメニュー記憶ステップと、
メニュー記憶ステップにより記憶されたメニューを、情報端末表示用に変換するメニュー変換ステップと、
共有画面と前記端末表示ステップのメニュー上のカーソル位置の座標変換を行う座標変換ステップと、
前記変換されたメニューを前記情報端末に表示させる表示ステップと、
を実行させることを特徴とするプログラム。
【請求項１７】
前記画像処理ステップは、
前記情報端末の表示能力を示す表示デバイス情報を取得するためのデバイス情報取得ステップと、
デバイス情報を記憶するデバイス情報記憶ステップと、
を備え、
前記メニュー変換ステップは、前記デバイス情報に基づいてメニューを変換することを特徴とする請求項１６に記載のプログラム。
【請求項１８】
前記デバイス情報は、前記情報端末が表示可能な縦幅、横幅からなる解像度から構成されることを特徴とする請求項１６又は１７に記載のプログラム。
【請求項１９】
前記座標変換ステップは、メニューが表示されている間のメニュー上以外の座標指示を無効とするステップを有することを特徴とする請求項１６乃至１８のいずれか１項に記載のプログラム。
【請求項２０】
前記座標変換ステップは、メニューが表示されている間のメニュー上以外の座標指示をメニュー領域内の座標指示へ補正するステップを有することを特徴とする請求項１６乃至１９のいずれか１項に記載のプログラム。
【請求項２１】
請求項１１乃至１５のいずれか１項に記載の記憶媒体において、
前記記憶媒体として、サーバ・コンピュータおよびクライアント・コンピュータが読む事ができるプログラムを格納したフレキシブルディスク、ハードディスク、光磁気ディスク、光ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ−ＲＯＭ、ＤＶＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることを特徴とするコンピュータ読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置と情報端末に接続され、表示装置は情報端末から操作可能な共有画面を表示し、情報端末は共有画面を表示する画像処理装置・方法、及びプログラムを記憶した記憶媒体に関するものである。
【背景技術】
【０００２】
近年のネットワークの発展に伴い、コンピュータシステムを利用した電子会議システムが普及してきている。特に大画面表示装置を利用した電子会議システムなどでは、大画面表示装置を会議参加者の共有表示装置として利用している。また単なる表示装置としての用途の他に電子ホワイトボード等、電子描画装置としての使われ方も増えてきている。このような電子会議システムは、１台のＰＣに大画面表示装置を接続し、会議参加者が画面に表示された情報を共有、編集する形態のものである。共有画面への入力端末としては有線又は無線のマウス、キーボード、タブレット、共有画面上へ直接座標入力が可能なデジタイザ等が使用されている。
【０００３】
一方、ノート型パーソナルコンピュータ（ＰＣ）、ＰＤＡ（Personal Digital Assistants）等の情報端末機器も普及してきており、両者を組み合わせた電子会議システムも見受けられる。
【０００４】
これらの多くの情報端末は無線又は有線のインタフェースを持ち、表示装置を持つものであればその多くは液晶表示画面を持ち、データの入力方法としては座標入力装置としてのマウス、タブレット等のペンやキーボードなどを備えており、そのため前述の電子会議システムの共有画面を操作するための入力端末としても使用することが出来る。
【０００５】
情報端末を共有画面の入力端末として使用する方法としては、端末に共有画面のカーソルの位置を指定するための座標指定エリアを設ける方法がある。
【０００６】
座標指定エリアには共有表示装置に表示されている画面を表示してもよい。表示する場合は両方が同じ表示となるため、共有画面、情報端末のどちらの表示を見ての操作も可能である。
【０００７】
特開平８−１７１４５５号公報に開示された「電子ボードシステム」では、共有画面と情報端末との間で互いに書き込んだ情報、表示している情報などの送受信を行い相互に同じ内容を表示できるようにして作業性を向上させるという提案がなされている。
【０００８】
このような共有画面表示装置と接続された情報端末の入力装置を用い、情報端末からマウスカーソルの移動座標及びマウスのクリック情報、操作コマンド情報等を共有画面表示装置へ送り共有画面表示装置側で情報端末から送られてきたイベント情報に準じて共有画面表示装置でイベントを発生させることにより、リモート端末から共有画面表示装置の操作が可能となり、会議やプレゼンテーション等の場で効果を発揮する。
【０００９】
【特許文献１】特開平８−１７１４５５号公報
【発明の開示】
【発明が解決しようとする課題】
【００１０】
しかしながら、共有表示装置上に表示されるものが小さい場合、たとえば右クリックの押下等で表示されるコンテキストメニューは、会議室内で画面から離れた場所に座っている会議参加者からはアイコンや文字の表示が見えづらい場合があった。情報端末側の表示にも同じコンテキストメニューが表示されるが、共有画面表示装置は会議参加者が見られる大きさである必要があるため大画面であり、また情報端末の表示装置は小型であるため、同一の画面を表示させるには情報端末側では縮小された画面を表示させなければならず、相対的にコンテキストメニューの表示も小さくなってしまい結果的にどちらの表示画面を見ても操作がしにくくまた誤操作を起こしやすいという課題があった。
【００１１】
上記の課題の場合、コンテキストニューの表示自体を大きくし視認性を向上させることにより誤操作を防ぐという方法がある。しかし、共有表示装置であるため一操作者が表示させたメニューにより共有画面の一部分を隠してしまうのは他の参加者の視聴の妨げになってしまうため好ましくない。さらに、本装置の発展形として、共有画面を複数端末から同時操作を行うという形態が考えられるが、その場合に複数の操作者がそれぞれ同時にコンテキストメニューを表示させるという場面が想定され、その場合には人数分のメニューの分だけ共有画面が隠されてしまうという前記と同様の課題があった。
【００１２】
本発明は上記のような問題点を鑑みてなされたもので、情報端末から共有画面のメニュー操作を行う場合において、共有画面と情報端末のどちらの画面を見ての操作においても、操作性と視認性を向上させる画像処理装置及び方法、並びプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１３】
上記の目的を達成するために、表示装置と情報端末に接続され、前記表示装置は前記情報端末から操作可能な共有画面を表示し、前記情報端末は前記共有画面を表示する端末表示手段を有する画像処理装置において、前記情報端末から前記共有画面上のカーソルの操作を行い、メニューを表示させるための座標指示およびメニュー表示指示を行うメニュー表示指示手段と、前記表示装置にメニューを表示する表示手段と、前記表示装置および情報端末の表示装置上に表示するメニューの情報を記憶するメニュー記憶手段と、メニュー記憶手段により記憶されたメニューを、情報端末表示用に変換するメニュー変換手段と、共有画面と前記端末表示手段のメニュー上のカーソル位置の座標変換を行う座標変換手段と、前記変換されたメニューを前記情報端末に表示させる表示手段と、を有することを特徴とする画像処理装置等、を提供する。
【発明の効果】
【００１４】
本発明によれば、情報端末の表示デバイスに応じて共有画面とは大きさおよびアイコン画像などの表示内容の異なるメニューを表示することにより視認性および操作性を向上させることができる。また、メニュー上では座標変換を行うことにより情報端末上での操作感を損なわずに共有画面上と同様の操作を行うことができる。
【発明を実施するための最良の形態】
【００１５】
以下、本発明の実施例について図面を参照して詳細に説明する。図１は本発明の第１の実施の形態に係る画像処理装置を含む会議システムの全体構成を示す概略図である。
図１において、本会議システムは、共有画面を表示するためのである比較的大きなディスプレイからなる表示装置１０１と、表示装置１０１に接続されパーソナルコンピュータ等から成る画像処理装置１０２と、ＬＡＮ等のネットワーク１０４を介して画像処理装置１０２に接続され、PDA（Personal Digital Assistant）やノート型ＰＣ等からなる情報端末１０３とで構成される。情報端末１０３は会議参加者が共有画面操作用に用いる端末であり複数存在してもよい。
【００１６】
図２は本発明の第１の実施の形態に係る画像処理装置及び情報端末の構成例を示すブロック図である。
画像処理装置１０２は、ＣＰＵやＭＰＵ等から成り、画像処理装置１０２の各部の制御を行う制御部２０１と、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）等から成り、表示装置および情報端末の表示装置上に表示するメニューの構成情報であるメニュー情報２０２及び情報端末の表示能力を示す表示デバイス情報２０３を記憶するためのＦｌａｓｈメモリやＲＡＭ等の不揮発性メモリやＨＤＤ等の外部記憶装置から成る記憶部２０４と、メニュー情報２０２を、情報端末表示用に変換するメニュー変換部２０５と、共有画面と前記端末表示手段のメニュー上のカーソル位置の座標変換を行う座標変換部２０６と、情報端末１０３との通信を制御するネットワークインタフェース部２０７とから構成される。
【００１７】
本図において情報端末１０３は、情報端末の各部の制御を行う制御部２０８と、共有画面を表示する表示部２０９と、共有画面上のカーソルの操作を行い、メニューを表示させるための座標指示およびメニュー表示指示を行うメニュー表示指示部２１０と、画像処理装置１０２との通信を制御するネットワークインタフェース部２１１と、マウス、タブレット、タッチパネル等からなる入力部２１２を備える。本実施の形態では、表示部２０９上にタブレットと配置し、メニュー表示指示部２１０と同一の領域を使用する。
【００１８】
図１６は、本第１の実施の形態における記憶部２０３に記憶されるデバイス情報テーブルの一例を示す表である。格納される情報としては、デバイスＩＤと、それぞれデバイスをネットワーク上で識別可能なＩＤ、ここではＩＰアドレスと、情報端末の共有画面を表示する表示デバイスの表示可能解像度（ｘ，ｙ）から構成される表示デバイス情報とが関連付けられる形で格納されている。デバイス情報は画像処理装置１０２中の図示しないデバイス情報取得部から取得しても、情報端末１０３からデバイス情報を送信するようにして取得しても構わない。
【００１９】
図８は本発明の第１の実施の形態における表示装置の画面表示の一例を示した図である。図中において８０１は画像処理装置と接続されている表示装置の共有画面である。
共有画面８０１上には端末Ａから表示されたメニュー８０２が表示されている。図中においてＳＸとＳＹは、共有画面のそれぞれ縦、横の解像度である。図中においてＸとＹはそれぞれメニュー８０２の縦、横の解像度である。
【００２０】
図９は本発明の第１の実施の形態における情報端末の画面表示の一例を示した図である。図中において９０１は情報端末で表示されている共有画面である。
画面９０１は共有画面８０１にてカーソル操作を行う場合等の座標指定を行う為の領域でもある。画面９０１上のカーソル移動操作とともに共有画面８０１上のカーソルも連動して移動する。共有画面８０１の左上座標と画面９０１の左上座標、共有画面８０１の右下座標と画面９０１の右下座標が対応する形となっている。絶対的に座標指定を行うため、自然な操作感を提供するためにも共有画面８０１と画面９０１の縦横比は同じであることが望ましい。本実施例での共有画面及び端末画面の縦横比は４：３で同じとしている。
【００２１】
画面９０１上には情報端末のカーソルクリックにより表示指示を行い表示されたメニュー９０２が表示されている。図中においてＣＸとＣＹは、情報端末の画面のそれぞれ縦、横の解像度である。そのため画面９０１には、共有画面８０１の表示の縦ＣＸ／ＳＸ、横ＣＹ／ＳＸの大きさで表示されている。
【００２２】
従って、共有画面８０１の解像度を１６００×１２００（Ｐｉｘｅｌ）、情報端末の画面９０２の解像度を８００×６００（Ｐｉｘｅｌ）とすると、メニュー９０２の大きさは１／２Ｘ、１／２Ｙとなる。
【００２３】
メニュー８０２の左上座標とメニュー９０２の左上座標、メニュー８０２の右下座標とメニュー９０２の右下座標が対応している。
【００２４】
図１０−１及び図１０−２は、図８及び図９の状態においてメニュー変換処理を行った場合の情報端末の画面表示例を示す図である。情報端末の画面１００１上にはメニュー１００２が表示されている。画面１００１の解像度は図９の画面９０１と同じであるが、メニュー１００２はメニュー変換部２０５により縦横二倍に拡大されているため、メニュー１００２の大きさは縦横Ｘ，Ｙである。
【００２５】
メニュー８０２の左上座標とメニュー８０２の左上座標、メニュー８０２の右下座標とメニュー１００２の右下座標が対応しており、共有画面とメニュー上での座標対応は異なる。本図ではメニューが縦横二倍で表示されているため、メニュー１００２上のカーソル位置は共有画面８０２上ではメニューの左上を原点とした相対位置へ変換される。これを図示したものが図１０−２である。メニュー１００２上のカーソル座標はメニュー左上を原点とすると（２Ｘ’，２Ｙ’）であり、メニュー８０２上では１／２倍され（Ｘ’，Ｙ’）で表示される。
【００２６】
図１１は、図８及び図９の状態においてメニュー変換処理を行った場合の情報端末の別の画面表示例を示す図である。情報端末の画面１１０１上にはメニュー１１０２が表示されている。画面１１０１の解像度は図９の画面９０１と同じであるが、メニュー１１０２はメニュー変換部２０５により縦二倍、横四倍に拡大されている。図１０−１及び図１０−２と同様にメニュー上の座標は縦１／２、横１／４に変換され共有画面８０１で表示される。
【００２７】
情報端末側で表示されるメニューの大きさは情報端末の表示デバイスの解像度と共有画面の解像度の比の逆数を算出して決定してもよい。図１６の端末Ａの表示デバイス解像度は、８００×６００（Ｐｉｘｅｌ）であり共有画面の解像度１６００×１２００である。縦横それぞれ１／２の大きさであるため情報端末のメニュー表示のみ１／（１／２）倍（＝２倍）の表示とする。端末Ｃの解像度は４００×３００で縦横それぞれ１／４であるため１／（１／４）倍（＝４倍）の表示とする。このような算出手段を用いることにより解像度の小さいデバイスでもメニューはその分大きく表示されるためメニュー操作が行いやすくなる。
【００２８】
図４は、本発明の第１の実施の形態における画像処理装置のメニュー表示制御処理手順を示したフローチャートである。図５は、本発明の第１の実施の形態における情報端末のメニュー表示制御処理手順を示したフローチャートである。
【００２９】
図５において、ステップＳ５０１で操作イベント取得待ちを行う。操作イベントとは、マウスカーソルの移動、マウスボタンダウン、マウスボタンアップなどのイベントや、その他コマンドであり、必要に応じて座標情報も含む。情報端末のタブレット上でのタップ等の操作により、操作イベントが発生する。ステップＳ５０２において、操作イベントはネットワークを介して画像処理装置へ送信される。
【００３０】
図４においてステップＳ４０１で情報端末からの操作イベント待ちを行い、ステップＳ５０１より送信された操作イベントが受信される。ステップＳ４０２では座標変換を行うかどうかの判断を行う。座標がメニュー上の場合のみ変換を行うため、操作イベント受信時に、既にメニューが表示されている、且つ指示座標がメニュー上に含まれている場合にステップＳ４０３へ進む。操作イベント内に座標情報はカーソル移動の場合は当然含まれるが、マウスボタンクリック時のイベント内にも座標が含まれている場合があるため、イベント内の情報に座標情報が含まれる場合もステップＳ４０２の判断条件へ加えるものとする。ステップＳ４０３では座標変換を行う。座標変換は図１０−２で図示したように、メニュー上の左上座標を原点とし原点からのメニュー上の相対位置が等しくなるように行う。ステップＳ４０４では、操作イベントがメニュー表示イベントかどうかの判定を行う。メニュー表示イベントであった場合は、まずステップＳ４０５において共有画面へ表示するためのメニュー画像を生成し、共有画面への表示を行う。次に、ステップＳ４０６にて操作イベントの返信として情報端末に表示するためのメニューの生成を行う。メニュー生成時には固定の比率を用いてメニューの大きさを決定してもよいし、デバイス情報を元に算出してもよい。ステップＳ４０７にて、生成した返信用メニュー画像を情報端末へ送信し、ステップＳ４０１へ戻る。ステップＳ４０４にてメニュー表示イベントでないと判断された場合はステップＳ４０８へ進み、カーソル移動イベントかどうかの判定を行う。カーソル移動イベントと判定された場合はステップＳ４０９にて、共有画面のカーソルの移動、表示を行う。ステップＳ４１０では、ステップＳ４０３で座標変換を行った場合のみ、行った変換の逆変換を行い、端末メニュー上での正しい相対位置へカーソル座標を変換しステップＳ４１１で情報端末へカーソル座標を送信する。ステップＳ４１２ではメニュー表示イベントとカーソル移動イベント以外の一般的なイベントの処理を行う。
【００３１】
ステップＳ４０７及びステップＳ４１１で情報端末へ返信が行われた場合は図５の情報端末側での処理へ移行し、ステップＳ５０３で受信される。ステップＳ５０３移行の処理は画像処理装置から受信するイベントの処理である。
【００３２】
ステップＳ５０３で受信された返信イベントはステップＳ５０４においてメニュー画像かどうか判断される。メニュー画像であった場合はステップＳ５０５にて情報端末の表示装置へその表示を行う。ここではメニュー画像のみの受信としているが、メニュー画像を含む共有画面全体の画像でも構わない。ステップＳ５０４において受信イベントは画像でないと判断された場合はステップＳ５０６においてカーソル座標であるかどうかの判断を行う。カーソル座標であった場合は、カーソルの表示を行う。受信イベントがメニュー画像でもカーソル座標でない場合はステップＳ５０８でその他の処理を行い、再び操作イベント待ち及びイベント受信待ち状態へ戻る。
【００３３】
以上のように本第１の実施の形態によれば、情報端末の表示デバイスに応じて共有画面とは大きさの異なるメニューを表示することにより視認性を向上させることができる。また、メニュー上では座標変換を行うことにより情報端末上での操作感を損なわずに共有画面上と同様の操作を行うことができる。
【００３４】
（第２の実施形態）
以下に詳述する第２の実施の形態においても図１に示した構成を用いる。図３は本発明の第２の実施の形態に係る画像処理装置及び情報端末の構成例を示すブロック図である。
画像処理装置３０２は、ＣＰＵやＭＰＵ等から成り、画像処理装置３０２の各部の制御を行う制御部３０３と、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）等から成り、表示装置および情報端末の表示装置上に表示するメニューの情報３０４を記憶するためのＦｌａｓｈメモリやＲＡＭ等の不揮発性メモリやＨＤＤ等の外部記憶装置から成る記憶部３０５と、情報端末３０７との通信を制御するネットワークインタフェース部３０６とから構成される。
【００３５】
本図において情報端末３０２は、情報端末の各部の制御を行う制御部３０８と、メニュー情報３０４を情報端末表示用に変換するメニュー変換部３０９と、共有画面と表示部３１１のメニュー上のカーソル位置の座標変換を行う座標変換部３１０と、共有画面を表示する表示部３１１と、共有画面上のカーソルの操作を行いメニューを表示させるための座標指示およびメニュー表示指示を行うメニュー表示指示部３１２と、画像処理装置３０２との通信を制御するネットワークインタフェース部３１２と、マウス、タブレット、タッチパネル等からなる入力部３１４を備える。本実施の形態では、表示部３１１上にタブレットと配置し、メニュー表示指示部３１２と同一の領域を使用する。
【００３６】
図１２は本発明の第２の実施の形態における表示装置の画面表示の一例を示した図である。図中において１２０１は画像処理装置と接続されている表示装置の共有画面である。
共有画面１２０１上には情報端末Ａから表示されたメニュー１２０２と、別の情報端末Ｂから表示されたメニュー１２０３と、さらに別の情報端末Ｃから表示されたメニュー１２０３とが表示されている。カーソル１２０５は端末Ａ、カーソル１２０６は端末Ｂ、カーソル１２０７は端末Ｃからそれぞれ操作を行っている。図中においてＳＸとＳＹは、共有画面のそれぞれ縦、横の解像度である。図中においてＸとＹはそれぞれメニュー１２０２の縦、横の解像度である。
【００３７】
図１３は本発明の第２の実施の形態における情報端末Ａの画面表示の一例を示した図である。図中において１３０１は情報端末Ａで表示されている共有画面である。
画面１３０１は共有画面１２０１にてカーソル操作を行う場合等の座標指定を行う為の領域でもある。
画面１３０１上のカーソル移動操作とともに共有画面１２０１上のカーソルも連動して移動する。共有画面１２０１の左上座標と画面１３０２の左上座標、共有画面１２０１の右下座標と画面１３０１の右下座標が対応する形となっている。
画面１３０１上には情報端末のカーソルクリックにより表示指示を行い表示されたメニュー１３０２が表示されている。図中においてＣＸとＣＹは、情報端末の画面のそれぞれ縦、横の解像度である。そのため画面１３０１には、共有画面１２０１の表示の縦ＣＸ／ＳＸ、横ＣＹ／ＳＸの大きさで表示されている。
【００３８】
図１４は、図１２及び図１３の状態においてメニュー変換処理を行った情報端末Ｂの画面表示例を示す図である。情報端末Ｂの画面１４０１上にはメニュー１４０２が表示されている。画面１４０１の解像度は図１３の画面１３０１と同じであるが、メニュー１４０２はメニュー変換部３０９により縦横二倍に拡大されているため、メニュー１４０２の大きさは縦横Ｘ，Ｙである。
【００３９】
図１５は、図１２及び図１３の状態においてメニュー変換処理を行った情報端末Ｃの画面表示例を示す図である。情報端末Ｃの画面１５０１上にはメニュー１５０２が表示されている。画面１５０１の解像度は図１３の画面１３０１と同じであるが、メニュー１５０２はメニュー変換部３０９により縦二倍、横四倍に拡大されている。図１４と同様にメニュー上の座標は縦１／２、横１／４に変換され共有画面１２０１で表示される。メニュー１５０２には視覚しやすくするためのアイコン１５０３が表示されている。図１３乃至１５における共有画面と情報端末の画面間のメニュー上の座標変換については第１の実施の形態と同様とする。
【００４０】
図６は、本発明の第２の実施の形態における画像処理装置のメニュー表示制御処理手順を示したフローチャートである。図７は、本発明の第２の実施の形態における情報端末のメニュー表示制御処理手順を示したフローチャートである。
【００４１】
図６において、ステップＳ７０１で操作イベント取得待ちを行う。操作イベントとは、マウスカーソルの移動、マウスボタンダウン、マウスボタンアップなどのイベントや、その他コマンドであり、必要に応じて座標情報も含む。情報端末のタブレット上でのタップ等の操作により、操作イベントが発生する。
【００４２】
ステップＳ７０２において、座標補正を行うかどうかの判断を行う。メニュー表示中であり、且つ操作イベント内に座標が含まれている場合はステップＳ７０３へ進み、座標補正を行う場合はステップＳ７０４で座標補正処理を行う。座標補正処理とは、メニューが表示されている間のメニュー上以外の指示座標をメニュー領域内の座標へ補正する、またはメニューが表示されている間のメニュー上以外の座標指示を無効とする処理である。この処理によりメニュー表示中の誤操作を防ぐことができる。ステップＳ７０５で指示座標がメニュー上である場合はステップＳ７０６へ進み座標の変換を行う。座標変換は実施の形態1と同様にメニュー上の左上座標を原点とし原点からのメニュー上の相対位置が等しくなるように行う。ステップＳ７０７において、情報端末の表示装置にてカーソルの表示を行う。ステップＳ７０８においてメニュー非表示イベントかどうか判定を行い、メニュー非表示イベントである場合はステップＳ７０９において情報端末の表示装置にてメニュー非表示処理を行う。ステップＳ７１０において、操作イベントはネットワークを介して画像処理装置へ送信される。
【００４３】
図６においてステップＳ６０１で情報端末からの操作イベント待ちを行い、ステップＳ７１０より送信された操作イベントが受信される。
【００４４】
ステップＳ６０２では、操作イベントがメニュー表示イベントかどうかの判定を行う。メニュー表示イベントであった場合は、ステップＳ６０３において共有画面へ表示するためのメニュー画像を生成し、共有画面への表示を行う。メニュー画像はメニュー情報３０４を元に生成を行う。メニュー情報にはアイコン１５０３の情報などが格納されているが、共有画面上ではメニューにより画面が隠されてしまうのを避けるためメニュー表示領域を小さくするようにアイコンの表示は行っていない。ステップＳ６０４にて操作イベントの返信として情報端末に表示するためのメニュー情報の送信を行い、ステップＳ６０１へ戻る。
【００４５】
ステップＳ６０２にてメニュー表示イベントでないと判断された場合はステップＳ６０５へ進み、カーソル移動イベントかどうかの判定を行う。カーソル移動イベントと判定された場合はステップＳ６０６にて、共有画面でのカーソルの移動、表示を行う。ステップＳステップＳ６０８ではメニュー表示イベントとカーソル移動イベント以外の一般的なイベントの処理を行う。
【００４６】
ステップＳ７１１で受信された返信イベントはステップＳ７１２においてメニュー情報かどうか判断される。メニュー情報であった場合はステップＳ７１３にてメニューを生成する。ここで、情報端末の表示装置の解像度や表示可能色数、処理能力、などからメニューの大きさ、アイコン表示の有無などを決定してもよい。そのため、画像処理装置からの送信内容に関らず情報端末に応じたメニュー表示が可能である。ステップＳ７１４において、生成したメニューの表示を行う。受信イベントがメニュー情報でもカーソル座標でない場合はステップＳ７１５でその他の処理を行い、再び操作イベント待ち及びイベント受信待ち状態へ戻る。
【００４７】
以上のように本第２の実施の形態によれば、複数の情報端末の操作時において、情報端末の表示デバイスに応じて共有画面とは大きさおよびアイコン画像などの表示内容の異なるメニューを表示することにより視認性および操作性を向上させることができる。また、メニュー上では座標変換を行うことにより情報端末上での操作感を損なわずに共有画面上と同様の操作を行うことができる。また、画像処理装置からの応答を待たずにカーソル移動時のカーソル表示が可能なため、画像処理装置で座標変換処理を行う場合に比べカーソル操作時のレスポンスを向上させることができる。
【図面の簡単な説明】
【００４８】
【図１】第１の実施の形態に係る画像処理装置を含む会議システムの全体構成を示す概略図である。
【図２】第１の実施の形態に係る画像処理装置及び情報端末の構成例を示すブロック図である。
【図３】第２の実施の形態に係る画像処理装置及び情報端末の構成例を示すブロック図である。
【図４】画像処理装置のメニュー表示制御処理手順を示したフローチャートである。
【図５】情報端末のメニュー表示制御処理手順を示したフローチャートである。
【図６】画像処理装置のメニュー表示制御処理手順を示したフローチャートである。
【図７】情報端末のメニュー表示制御処理手順を示したフローチャートである。
【図８】表示装置の画面表示の一例を示した図である。
【図９】情報端末の画面表示の一例を示した図である。
【図１０−１】メニュー変換処理を行った場合の情報端末の画面表示例を示す図である。
【図１０−２】メニュー上で座標変換を行った場合のメニューを示す図である。
【図１１】メニュー変換処理を行った場合の情報端末の画面表示例を示す図である。
【図１２】表示装置の画面表示の一例を示した図である。
【図１３】情報端末の画面表示の一例を示した図である。
【図１４】メニュー変換処理を行った情報端末の画面表示例を示す図である。
【図１５】メニュー変換処理を行った情報端末の画面表示例を示す図である。
【図１６】記憶部に記憶されるデバイス情報テーブルを示す図である。
【符号の説明】
【００４９】
１０１：表示装置
１０２：画像処理装置
１０３：情報端末
１０４：ネットワーク
２０１：制御部
２０２：メニュー情報
２０３：デバイス情報
２０４：記憶部
２０５：メニュー変換部
２０６：座標変換部
２０７、２１１：ネットワークインタフェース部
２０８：制御部
２０９：表示部
２１０：メニュー表示指示部
２１２：座標入力装置
３０１：表示装置
３０２：画像処理装置
３０３：制御部
３０４：メニュー情報
３０５：記憶部
３０６、３１３：ネットワークインタフェース部
３０７：情報端末
３０８：制御部
３０９：メニュー変換部
３１０：座標変換部
３１１：表示部
３１２：メニュー表示指示部
３１３：表示部
３１４：座標入力装置
【図１】
2006108911.tif 000003
【図２】
2006108911.tif 000004
【図３】
2006108911.tif 000005
【図４】
2006108911.tif 000006
【図５】
2006108911.tif 000007
【図６】
2006108911.tif 000008
【図７】
2006108911.tif 000009
【図８】
2006108911.tif 000010
【図９】
2006108911.tif 000011
【図１０−１】
2006108911.tif 000012
【図１０−２】
2006108911.tif 000013
【図１１】
2006108911.tif 000014
【図１２】
2006108911.tif 000015
【図１３】
2006108911.tif 000016
【図１４】
2006108911.tif 000017
【図１５】
2006108911.tif 000018
【図１６】
2006108911.tif 000019