(57)【要約】【課題】手書きされたオブジェクトのレイアウトを保持しつつ、当該オブジェクトのテキスト変換後の表示品位を向上させることが可能な情報処理装置、情報処理方法、及びプログラムを提供する。【解決手段】情報処理装置１は、手書きオブジェクトＡ２を文字認識してテキスト情報に変換するテキスト変換部２１２と、手書きオブジェクトＡ２の直前に手書きされた手書きオブジェクトＡ１に対してテキスト変換処理が行われ、かつ、手書きオブジェクトＡ２の位置が手書きオブジェクトＡ１の位置から所定範囲内である場合に、手書きオブジェクトＡ２に対応するフォントサイズを手書きオブジェクトＡ１に対応するフォントサイズと同一のサイズに決定して手書きオブジェクトＡ２に対応するテキストオブジェクトＴ２を生成するオブジェクト生成部２１３と、テキストオブジェクトＴ２を表示部１２０に表示させる表示処理部２１４と、を備える。【選択図】図１
2020071799.tif 000002
【特許請求の範囲】
【請求項１】
手書きされた第１手書きオブジェクトを文字認識してテキスト情報に変換するテキスト変換処理を行うテキスト変換部と、
前記第１手書きオブジェクトの直前に手書きされた第２手書きオブジェクトに対して前記テキスト変換処理が行われたか否かを判定する処理判定部と、
前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内であるか否かを判定する位置判定部と、
前記第２手書きオブジェクトに対して前記テキスト変換処理が行われ、かつ、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内である場合に、前記第１手書きオブジェクトに対応するフォントサイズを、前記第２手書きオブジェクトに対応するフォントサイズと同一のサイズに決定するサイズ決定部と、
前記テキスト変換部により変換された前記テキスト情報と、前記サイズ決定部により決定された前記フォントサイズとに基づいて、前記第１手書きオブジェクトに対応する第１テキストオブジェクトを生成するオブジェクト生成部と、
前記オブジェクト生成部により生成された前記第１テキストオブジェクトを表示部に表示させる表示処理部と、
を備える情報処理装置。
【請求項２】
前記第２手書きオブジェクトに対して前記テキスト変換処理が行われなかった場合、又は、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から前記所定範囲内でない場合に、前記オブジェクト生成部は、前記第１手書きオブジェクトに対応するフォントサイズを、前記第１手書きオブジェクトにおける最大高さのフォントサイズに決定する、
請求項１に記載の情報処理装置。
【請求項３】
前記第１手書きオブジェクトに対応するフォントサイズと前記第２手書きオブジェクトに対応するフォントサイズとの差が閾値を超えるか否かを判定するサイズ判定部をさらに備え、
前記オブジェクト生成部は、前記差が前記閾値を超える場合に、前記第１手書きオブジェクトに対応するフォントサイズを、前記第１手書きオブジェクトにおける最大高さのフォントサイズに決定する、
請求項１又は請求項２に記載の情報処理装置。
【請求項４】
前記表示処理部は、前記第１テキストオブジェクトを、前記第２手書きオブジェクトに対応する第２テキストオブジェクトの位置に合わせて表示させる、
請求項１から請求項３の何れか１項に記載の情報処理装置。
【請求項５】
前記第１テキストオブジェクト及び前記第２テキストオブジェクトをグループ化するグルーピング部をさらに備え、
前記グルーピング部によりグループ化された前記第１テキストオブジェクト及び前記第２テキストオブジェクトのうち一方が第１方向に第１移動量だけ移動された場合に、前記表示処理部は、他方を前記第１方向に前記第１移動量だけ移動させる、
請求項４に記載の情報処理装置。
【請求項６】
手書きされた第１手書きオブジェクトを文字認識してテキスト情報に変換するテキスト変換処理を行うステップと、
前記第１手書きオブジェクトの直前に手書きされた第２手書きオブジェクトに対して前記テキスト変換処理が行われたか否かを判定するステップと、
前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内であるか否かを判定するステップと、
前記第２手書きオブジェクトに対して前記テキスト変換処理が行われ、かつ、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内である場合に、前記第１手書きオブジェクトに対応するフォントサイズを、前記第２手書きオブジェクトに対応するフォントサイズと同一のサイズに決定するステップと、
前記テキスト情報と前記フォントサイズとに基づいて、前記第１手書きオブジェクトに対応する第１テキストオブジェクトを生成するステップと、
前記第１テキストオブジェクトを表示部に表示させるステップと、
を含む情報処理方法。
【請求項７】
手書きされた第１手書きオブジェクトを文字認識してテキスト情報に変換するテキスト変換処理を行うステップと、
前記第１手書きオブジェクトの直前に手書きされた第２手書きオブジェクトに対して前記テキスト変換処理が行われたか否かを判定するステップと、
前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内であるか否かを判定するステップと、
前記第２手書きオブジェクトに対して前記テキスト変換処理が行われ、かつ、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内である場合に、前記第１手書きオブジェクトに対応するフォントサイズを、前記第２手書きオブジェクトに対応するフォントサイズと同一のサイズに決定するステップと、
前記テキスト情報と前記フォントサイズとに基づいて、前記第１手書きオブジェクトに対応する第１テキストオブジェクトを生成するステップと、
前記第１テキストオブジェクトを表示部に表示させるステップと、
をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示部にタッチペンにより描画情報を描画（入力）可能な情報処理装置、情報処理方法、及びプログラムに関する。
【背景技術】
【０００２】
従来、タッチパネルを用いてユーザからの指示入力（タッチ）を受け付ける表示装置（情報処理装置）の１つとして、電子ボード（電子白板又は電子黒板ともいう。）が知られている（例えば特許文献１参照）。前記電子ボードは、タッチパネル上においてタッチペン等によって手書きされた情報（オブジェクト）の位置座標を読み取り、読み取った位置座標の情報に基づいて前記オブジェクトを文字認識してテキスト変換し、変換したテキストを表示部に表示する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１５−１９４８５０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
前記電子ボードにおけるテキスト変換では、手書きされたオブジェクトのレイアウトを保持することが重要である。しかし、手書きされたオブジェクトのサイズ及び位置に基づいて、変換したテキストのフォントサイズ及び表示位置を決定すると、表示されたテキストのフォントサイズ及び表示位置にばらつきが生じ、見た目が損なわれて表示品位が低下する場合がある。
【０００５】
本発明の目的は、手書きされたオブジェクトのレイアウトを保持しつつ、当該オブジェクトのテキスト変換後の表示品位を向上させることが可能な情報処理装置、情報処理方法、及びプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
本発明の一の態様に係る情報処理装置は、手書きされた第１手書きオブジェクトを文字認識してテキスト情報に変換するテキスト変換処理を行うテキスト変換部と、前記第１手書きオブジェクトの直前に手書きされた第２手書きオブジェクトに対して前記テキスト変換処理が行われたか否かを判定する処理判定部と、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内であるか否かを判定する位置判定部と、前記第２手書きオブジェクトに対して前記テキスト変換処理が行われ、かつ、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内である場合に、前記第１手書きオブジェクトに対応するフォントサイズを、前記第２手書きオブジェクトに対応するフォントサイズと同一のサイズに決定するサイズ決定部と、前記テキスト変換部により変換された前記テキスト情報と、前記サイズ決定部により決定された前記フォントサイズとに基づいて、前記第１手書きオブジェクトに対応する第１テキストオブジェクトを生成するオブジェクト生成部と、前記オブジェクト生成部により生成された前記第１テキストオブジェクトを表示部に表示させる表示処理部と、を備える。
【０００７】
本発明の他の態様に係る情報処理方法は、手書きされた第１手書きオブジェクトを文字認識してテキスト情報に変換するテキスト変換処理を行うステップと、前記第１手書きオブジェクトの直前に手書きされた第２手書きオブジェクトに対して前記テキスト変換処理が行われたか否かを判定するステップと、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内であるか否かを判定するステップと、前記第２手書きオブジェクトに対して前記テキスト変換処理が行われ、かつ、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内である場合に、前記第１手書きオブジェクトに対応するフォントサイズを、前記第２手書きオブジェクトに対応するフォントサイズと同一のサイズに決定するステップと、前記テキスト情報と前記フォントサイズとに基づいて、前記第１手書きオブジェクトに対応する第１テキストオブジェクトを生成するステップと、前記第１テキストオブジェクトを表示部に表示させるステップと、を含む。
【０００８】
本発明の他の態様に係るプログラムは、手書きされた第１手書きオブジェクトを文字認識してテキスト情報に変換するテキスト変換処理を行うステップと、前記第１手書きオブジェクトの直前に手書きされた第２手書きオブジェクトに対して前記テキスト変換処理が行われたか否かを判定するステップと、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内であるか否かを判定するステップと、前記第２手書きオブジェクトに対して前記テキスト変換処理が行われ、かつ、前記第１手書きオブジェクトの位置が前記第２手書きオブジェクトの位置から所定範囲内である場合に、前記第１手書きオブジェクトに対応するフォントサイズを、前記第２手書きオブジェクトに対応するフォントサイズと同一のサイズに決定するステップと、前記テキスト情報と前記フォントサイズとに基づいて、前記第１手書きオブジェクトに対応する第１テキストオブジェクトを生成するステップと、前記第１テキストオブジェクトを表示部に表示させるステップと、をコンピュータに実行させるためのプログラムである。
【発明の効果】
【０００９】
本発明によれば、手書きされたオブジェクトのレイアウトを保持しつつ、当該オブジェクトのテキスト変換後の表示品位を向上させることが可能である。
【図面の簡単な説明】
【００１０】
【図１】図１は、本発明の実施形態に係る情報処理装置の構成を示すブロック図である。
【図２】図２は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図３】図３は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図４】図４は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図５】図５は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図６】図６は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図７】図７は、本発明の実施形態に係る情報処理装置におけるオブジェクト表示処理の手順の一例を説明するためのフローチャートである。
【図８】図８は、本発明の実施形態に係る情報処理装置における表示位置決定処理の手順の一例を説明するためのフローチャートである。
【図９】図９は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図１０】図１０は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図１１】図１１は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図１２】図１２は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図１３】図１３は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図１４】図１４は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図１５】図１５は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【図１６】図１６は、本発明の実施形態に係る表示部に表示される表示画面の一例を示す図である。
【発明を実施するための形態】
【００１１】
以下、添付図面を参照しながら、本発明の実施形態について説明する。なお、以下の実施形態は、本発明を具体化した一例であって、本発明の技術的範囲を限定する性格を有さない。
【００１２】
図１に示すように、本発明の実施形態に係る情報処理装置１は、タッチパネルディスプレイ１００と、制御装置２００と、タッチペン３００とを備えている。制御装置２００は、タッチパネルディスプレイ１００に接続され、タッチパネルディスプレイ１００を制御するコンピュータである。タッチペン３００は、制御装置２００にネットワーク（有線通信又は無線通信）を介して接続されている。なお、タッチペン３００は、省略されてもよい。
【００１３】
タッチパネルディスプレイ１００は、タッチパネル１１０と、表示部１２０と、を備えている。タッチパネル１１０は、静電容量方式のタッチパネルであってもよいし、感圧式又は赤外線遮断方式のタッチパネルであってもよい。すなわち、タッチパネル１１０は、タッチ等、利用者の操作入力を適宜受け付けることが可能な装置であればよい。タッチパネル１１０は、表示部１２０に設けられている。表示部１２０は、例えば液晶ディスプレイである。なお、表示部１２０は、液晶ディスプレイに限定されず、ＬＥＤ（Light Emitting Diode）ディスプレイ、有機ＥＬ（Electro-Luminescence）ディスプレイ、プロジェクタ等であってもよい。
【００１４】
タッチパネルディスプレイ１００は、コンピュータ、タブレット端末、スマートフォン、カーナビゲーションなどの装置であってもよい。
【００１５】
タッチペン３００は、ユーザがタッチパネルディスプレイ１００に対してタッチ（入力）するためのペンである。タッチペン３００が省略される場合は、ユーザは指によりタッチパネルディスプレイ１００に対してタッチ（入力）する。例えばユーザは、タッチペン３００又は指により、文字、図形などのオブジェクトを手書き入力（描画）する。
【００１６】
図１に示すように、制御装置２００は、記憶部２２０と、制御部２１０とを備えている。記憶部２２０には、制御装置２００が実行可能なコンピュータプログラム２２１が格納されている。制御部２１０は、ＣＰＵ（Central Processing Unit）で構成されている。ユーザの操作により制御装置２００の起動が指示された場合（例えば、図示しない電源ボタンが押下された場合）、制御部２１０は、記憶部２２０からコンピュータプログラム２２１を読み出して実行する。これにより、制御装置２００が起動する。
【００１７】
また、記憶部２２０には、制御装置２００が実行可能なコンピュータプログラム２２１として、ペンソフトウェアがインストールされている。制御装置２００が起動しているときに、ユーザの操作によりペンソフトウェアの起動が指示された場合、制御部２１０は、記憶部２２０からペンソフトウェアを読み出して実行する。これにより、ペンソフトウェアが制御装置２００上で起動する。
【００１８】
また、記憶部２２０には、ユーザがタッチパネルディスプレイ１００において手書きした文字、図形などの手書きオブジェクトに関する情報、及び、手書き文字をテキスト形式に変換したオブジェクトであるテキストオブジェクトに関する情報を含むオブジェクト情報２２２が記憶される。オブジェクト情報２２２には、手書きオブジェクトの画像、テキストオブジェクトの画像、手書きオブジェクトの位置座標、及び、オブジェクト（手書きオブジェクト、テキストオブジェクト）のフォントサイズが含まれる。またオブジェクト情報２２２には、手書きオブジェクトに対して実行された処理内容の情報（テキスト変換処理、表示処理など）が含まれる。またオブジェクト情報２２２には、ユーザにより手書きオブジェクトが入力された順（時系列）に各情報が記憶される。
【００１９】
制御部２１０は、入力検出部２１１と、テキスト変換部２１２と、オブジェクト生成部２１３と、表示処理部２１４とを備えている。制御部２１０は、例えば、タッチパネルディスプレイ１００に対して手書き入力された文字、図形などの手書きオブジェクトの画像（手書き画像）の表示を制御したり、他の画像入力装置から入力された画像（入力画像）の表示を制御したりする。
【００２０】
入力検出部２１１は、タッチパネルディスプレイ１００に対するタッチペン３００の入力を検出する。具体的には、入力検出部２１１は、タッチパネル１１０上においてタッチペン３００又はユーザの指によって手書き入力（指定）された位置座標を検出する。入力検出部２１１は、検出した位置座標を記憶部２２０のオブジェクト情報２２２に記憶する。
【００２１】
テキスト変換部２１２は、入力検出部２１１により検出された前記位置座標に基づいて、手書きオブジェクトを文字認識し、テキスト情報に変換するテキスト変換処理を行う。例えば、タッチパネルディスプレイ１００において、ユーザが文字を手書き入力し、テキスト変換コマンドを選択した場合、テキスト変換部２１２は、手書き入力された位置座標に基づいて文字認識し、テキスト情報に変換する。
【００２２】
オブジェクト生成部２１３は、入力検出部２１１により検出された前記位置座標に基づいて、表示部１２０に表示するオブジェクトを生成する。例えば、オブジェクト生成部２１３は、手書き入力された手書きオブジェクトの位置座標に基づいて、手書きオブジェクトを生成する。また、オブジェクト生成部２１３は、テキスト変換部２１２により変換されたテキスト情報に基づいて、テキストオブジェクトを生成する。オブジェクト生成部２１３は、生成したオブジェクトの画像、フォントサイズの情報を記憶部２２０のオブジェクト情報２２２に記憶する。
【００２３】
表示処理部２１４は、オブジェクト生成部２１３により生成されたオブジェクト（手書きオブジェクト、テキストオブジェクト）の画像などを表示部１２０に表示させる。例えば、制御装置２００においてペンソフトウェアが起動しているときに、ユーザがタッチペン３００により手書きで「テキスト１」を入力した場合、表示処理部２１４は、ユーザの筆跡に応じた手書きオブジェクトＡ１を表示部１２０に表示させる（図２参照）。
【００２４】
図２に示すように、表示部１２０の表示画面は、シート１０ａと、ツールバー１０ｂと、メニュー画面１２と、メニュー画面１２に含まれる複数のアイコン１２ａとを含んでいる。シート１０ａは、表示画面の上部に配置され、ツールバー１０ｂは、表示画面の下部に配置される。シート１０ａは、タッチパネル１１０を構成するボード（例えば、ホワイトボード）の領域に対応する。
【００２５】
ユーザは、シート１０ａ（ボード）に対してタッチペン３００により文字等の描画情報を描画（入力）することができる。図２には、ユーザがタッチペン３００により描画した描画情報（「テキスト１」）を示している。ユーザがシート１０ａに対してタッチペン３００により描画情報を描画した場合、入力検出部２１１はタッチペン３００の入力（位置座標）を検出し、表示処理部２１４は、入力検出部２１１により検出された位置座標に基づいて、入力の軌跡を表示部１２０に表示させる。またシート１０ａには、前記画像入力装置から入力される画像が表示される。このように、表示部１２０に表示されるシート１０ａは、描画及び画像等のオブジェクトを配置可能に構成されている。
【００２６】
アイコン１２ａは、ペンソフトウェアにおける特定の機能を実行するためのショートカットアイコンであり、当該機能に応じて複数配置されている。前記機能には、例えば、「ファイルを開く」、「ファイルを保存する」、「印刷」、「線を描く」、「消しゴム」、「テキスト変換」などが含まれる。ユーザは、所望の機能を適宜追加することができる。
【００２７】
ツールバー１０ｂには、表示画面を操作するための機能を実行するための複数の操作ボタンが配置されている。図２には、操作ボタン１３〜１５を例示している。操作ボタン１３は、表示画面に表示される複数のシート１０ａ（ページ）をサムネイル画像で一覧表示させるための操作ボタンである。操作ボタン１４は、表示画面に拡張機能のメニュー（図示せず）を表示させるための操作ボタンである。操作ボタン１５は、表示画面に表示されたシート１０ａの番号（シート番号）を繰り上げる又は繰り下げる（ページをめくる）ための操作ボタンである。２つの操作ボタン１５の間には、表示画面に現在表示されているシート１０ａ（ページ）の番号が表示される。
【００２８】
ツールバー１０ｂに、その他の操作ボタンが配置されてもよい。例えば、ペンソフトウェアの設定画面を表示させる操作ボタン、ペンソフトウェアをタスクトレイに格納するための操作ボタン、ペンソフトウェアを終了するための操作ボタンなどが、ツールバー１０ｂに配置されてもよい。
【００２９】
図２に示す表示画面において、例えば、ユーザがメニュー画面１２のアイコン１２ａを指示媒体（タッチペン３００のペン先又はユーザの指先）でタッチ（選択）すると、制御部２１０は、当該タッチに応じた処理を行う。例えば、ユーザが表示部１２０（図２参照）に表示された手書きオブジェクトＡ１を範囲指定などにより選択して、メニュー画面１２の「テキスト変換」のアイコン１２ａ（テキスト変換コマンド）をタッチすると、制御部２１０は以下の処理を行う。先ず、テキスト変換部２１２が、手書きオブジェクトＡ１に対応する位置座標に基づいて文字認識してテキスト情報に変換する。次に、オブジェクト生成部２１３が、前記テキスト情報に基づいてテキストオブジェクトＴ１を生成する。最後に、表示処理部２１４が、図３に示すように、テキストオブジェクトＴ１の画像を表示部１２０に表示させる。
【００３０】
ここで、オブジェクト生成部２１３は、テキストオブジェクトの文字の大きさ（フォントサイズ）を決定する処理を行う。例えば、オブジェクト生成部２１３は、テキストオブジェクトのフォントサイズを、図２に示す手書きオブジェクトＡ１における最大高さＨ１のフォントサイズに決定する。図３では、前記最大高さＨ１に応じたフォントサイズに決定されたテキストオブジェクトＴ１を示している。
【００３１】
また例えば、オブジェクト生成部２１３は、直前に入力された手書きオブジェクトに対して前記テキスト変換処理が行われ、かつ、今回入力された手書きオブジェクトの位置（座標）が、直前に入力された手書きオブジェクトの位置（座標）から所定範囲内である場合に、今回入力された手書きオブジェクトに対応するテキストオブジェクトのフォントサイズを、直前に入力された手書きオブジェクトに対応するテキストオブジェクトに対してオブジェクト生成部２１３により決定されたフォントサイズと同一のサイズに決定する。尚、「今回入力された手書きオブジェクト」は、本発明の第１手書きオブジェクトの一例であり、「直前に入力された手書きオブジェクト」は、本発明の第２手書きオブジェクトの一例である。
【００３２】
例えば、ユーザが手書きオブジェクトＡ１（図２参照）を入力してテキスト変換コマンドを選択することにより、テキスト変換処理が行われてテキストオブジェクトＴ１（図３参照）が表示されている場合において、続けてユーザが手書きオブジェクトＡ２（図４参照）を入力してテキスト変換コマンドを選択する。この場合、直前に入力された手書きオブジェクトＡ１に対して前記テキスト変換処理が行われ、かつ、今回入力された手書きオブジェクトＡ２の位置が、直前に入力された手書きオブジェクトＡ１（又はテキストオブジェクトＴ１）の位置から所定範囲である場合に、オブジェクト生成部２１３は、手書きオブジェクトＡ２に対応するテキストオブジェクトＴ２のフォントサイズを、手書きオブジェクトＡ１に対応するテキストオブジェクトＴ１に対してオブジェクト生成部２１３により決定されたフォントサイズと同一のサイズに決定する。
【００３３】
これに対して、例えば、ユーザが手書きオブジェクトＡ１（図２参照）を入力してテキスト変換コマンドを選択することによりテキストオブジェクトＴ１（図３参照）が表示された後に、ユーザが手書きオブジェクトＢ１（図４参照）を入力した場合、オブジェクト生成部２１３は、手書きオブジェクトＢ１の位置座標に基づいて、手書きオブジェクトを生成する。表示処理部２１４は、オブジェクト生成部２１３により生成されたテキストオブジェクトＴ１の画像と、手書きオブジェクトＢ１の画像とを表示部１２０に表示させる。続いて、ユーザが手書きオブジェクトＡ２（図４参照）を入力してテキスト変換コマンドを選択した場合、オブジェクト生成部２１３は以下の処理を行う。この場合、手書きオブジェクトＡ２の直前に入力された手書きオブジェクトＢ１に対して前記テキスト変換処理が行われなかったため、オブジェクト生成部２１３は、テキストオブジェクトＴ２のフォントサイズを、手書きオブジェクトＡ２における最大高さＨ２のフォントサイズに決定する。
【００３４】
また、手書きオブジェクトＡ２の直前に入力された手書きオブジェクトＡ１に対して前記テキスト変換処理が行われ、かつ、今回入力された手書きオブジェクトＡ２の位置が、直前に入力された手書きオブジェクトＡ１の位置から所定範囲内でない場合にも、オブジェクト生成部２１３は、テキストオブジェクトＴ２のフォントサイズを、手書きオブジェクトＡ２における最大高さＨ２のフォントサイズに決定する。ここで、前記所定範囲は、直前に入力された手書きオブジェクトの近傍の範囲に設定される。例えば、前記所定範囲は、直前に入力された手書きオブジェクトの位置（座標）の周囲であって、当該手書きオブジェクトに対応するフォントサイズの高さに応じた範囲に設定される。前記所定範囲は、特に限定されるものではなく、複数のオブジェクトに相関関係が想起される程度の範囲に設定される。
【００３５】
オブジェクト生成部２１３は、前記フォントサイズを決定すると、テキスト変換部２１２により変換された前記テキスト情報と、決定した前記フォントサイズとに基づいて、テキストオブジェクトＴ２を生成する。表示処理部２１４は、オブジェクト生成部２１３により生成されたテキストオブジェクトＴ２を表示部１２０に表示させる。オブジェクト生成部２１３により前記テキストオブジェクトＴ２のフォントサイズが前記テキストオブジェクトＴ１のフォントサイズと同一のサイズに決定された場合、図５に示すように、前記テキストオブジェクトＴ２が、前記テキストオブジェクトＴ１と同一のフォントサイズで表示される。一方、オブジェクト生成部２１３により前記テキストオブジェクトＴ２のフォントサイズが最大高さＨ２に決定された場合、図６に示すように、前記テキストオブジェクトＴ２が、前記手書きオブジェクトＡ２の大きさに応じたフォントサイズで表示される。テキストオブジェクトＴ２は、本発明の第１テキストオブジェクトの一例であり、テキストオブジェクトＴ１は、本発明の第２テキストオブジェクトの一例である。
【００３６】
尚、オブジェクト生成部２１３は、本発明の処理判定部、位置判定部、サイズ決定部、及びオブジェクト生成部の一例である。
【００３７】
［オブジェクト表示処理］
以下、図７を参照しつつ、制御装置２００の制御部２１０によって実行されるオブジェクト表示処理の手順の一例について説明する。前記オブジェクト表示処理は、本発明の情報処理方法の一例である。前記オブジェクト表示処理は、タッチパネルディスプレイ１００において、ユーザが手書きオブジェクトを入力し、「テキスト変換」のアイコン１２ａ（テキスト変換コマンド）を選択することにより開始される。ここでは、図４から図６に示した例に従って説明する。
【００３８】
例えば、ユーザがタッチペン３００を使用して手書きで「テキスト２」を入力した場合、制御部２１０（オブジェクト生成部２１３）は手書きオブジェクトＡ２を生成し、制御部２１０（表示処理部２１４）は当該手書きオブジェクトＡ２の画像を表示部１２０に表示させる（図４参照）。次に、ユーザが「テキスト変換」を選択すると、ステップＳ１０１において、制御部２１０（テキスト変換部２１２）は、手書きオブジェクトＡ２を文字認識してテキスト情報に変換する。
【００３９】
ステップＳ１０２において、制御部２１０（オブジェクト生成部２１３）は、直前に入力された手書きオブジェクトに対して前記テキスト変換処理が行われたか否かを判定する。制御部２１０により、直前に入力された手書きオブジェクトに対して前記テキスト変換処理が行われたと判定された場合、すなわち直前に入力された手書きオブジェクトＡ１に対してテキスト変換処理が行われた場合（図３参照）（Ｓ１０２：ＹＥＳ）、処理はステップＳ１０３に移行する。一方、制御部２１０により、直前に入力された手書きオブジェクトに対して前記テキスト変換処理が行われなかったと判定された場合、すなわち直前に入力された手書きオブジェクトＢ１に対してテキスト変換処理が行われなかった場合（図４参照）（Ｓ１０２：ＮＯ）、処理はステップＳ１０５に移行する。
【００４０】
ステップＳ１０３において、制御部２１０（オブジェクト生成部２１３）は、今回入力された手書きオブジェクトＡ２の位置が、直前に入力された手書きオブジェクトＡ１の位置から所定範囲内であるか否かを判定する。制御部２１０により手書きオブジェクトＡ２の位置が手書きオブジェクトＡ１の位置から所定範囲内であると判定された場合（Ｓ１０３：ＹＥＳ）、処理はステップＳ１０４に移行する。一方、制御部２１０により手書きオブジェクトＡ２の位置が手書きオブジェクトＡ１の位置から所定範囲内でないと判定された場合（Ｓ１０３：ＮＯ）、処理はステップＳ１０５に移行する。
【００４１】
ステップＳ１０４において、制御部２１０（オブジェクト生成部２１３）は、今回入力された手書きオブジェクトＡ２に対応するテキストオブジェクトＴ２のフォントサイズを、直前に入力された手書きオブジェクトＡ１に対応するテキストオブジェクトＴ１に対してオブジェクト生成部２１３により決定されたフォントサイズと同一のサイズに決定する。尚、制御部２１０は、記憶部２２０のオブジェクト情報２２２において、テキストオブジェクトＴ１のフォントサイズを参照する。
【００４２】
一方、ステップＳ１０５において、制御部２１０（オブジェクト生成部２１３）は、テキストオブジェクトＴ２のフォントサイズを、手書きオブジェクトＡ２における最大高さＨ２（図４参照）のフォントサイズに決定する。
【００４３】
ステップＳ１０６において、制御部２１０は、今回入力された手書きオブジェクトＡ２に対する処理内容と、決定したフォントサイズの情報を記憶部２２０のオブジェクト情報２２２に記憶する。例えば、制御部２１０は、手書きオブジェクトＡ２に対する処理内容として「テキスト変換処理」の情報と、フォントサイズとしてテキストオブジェクトＴ１と同一のフォントサイズの情報とをオブジェクト情報２２２に記憶する。
【００４４】
ステップＳ１０７において、制御部２１０（オブジェクト生成部２１３）は、手書き入力された「テキスト２」の手書きオブジェクトＡ２を削除し、「テキスト２」の前記テキスト情報と、決定した前記フォントサイズとに基づいて、テキストオブジェクトＴ２を生成する。
【００４５】
ステップＳ１０８において、制御部２１０（表示処理部２１４）は、オブジェクト生成部２１３により生成されたテキストオブジェクトＴ２の画像を、手書きオブジェクトＡ２の位置座標に基づいて、表示部１２０に表示させる（図５及び図６参照）。
【００４６】
以上のように、本発明の実施形態に係る情報処理装置１によれば、例えばユーザにより入力された手書きオブジェクトＡ１，Ａ２が、相関関係があり、互いに近接して配置されるとともに連続して入力された場合に、これらをテキスト変換したテキストオブジェクトＴ１，Ｔ２のフォントサイズを統一して表示させることができる。よって、手書きオブジェクトのレイアウトを保持しつつ、当該手書きオブジェクトのテキスト変換後のフォントサイズのばらつきを抑えることができるため、表示品位を向上させることが可能となる。
【００４７】
ここで、ユーザは、意図的に文字の大きさを異ならせて手書き文字（手書きオブジェクトＡ１，Ａ２）を入力する場合がある。例えば、ユーザは、直前に手書きした文字（手書きオブジェクトＡ１）よりも目立つように、大きいフォントサイズで手書きオブジェクトＡ２を手書きする場合がある。このような場合には、情報処理装置１は、以下の処理を行ってもよい。例えば、制御部２１０（オブジェクト生成部２１３）が、今回入力された手書きオブジェクトＡ２に対応するフォントサイズと、直前に入力された手書きオブジェクトＡ１（テキストオブジェクトＴ１）に対応するフォントサイズとの差が、閾値を超えるか否かを判定する。そして、前記差が前記閾値を超える場合には、制御部２１０（オブジェクト生成部２１３）は、手書きオブジェクトＡ２に対応するテキストオブジェクトＴ２のフォントサイズを、テキストオブジェクトＴ１のフォントサイズに合わせず、手書きオブジェクトＡ２に対応するフォントサイズ、すなわち手書きオブジェクトＡ２における最大高さＨ２のフォントサイズに決定する。これにより、ユーザの意図が反映されたテキスト変換を行うことができる。オブジェクト生成部２１３は、本発明のサイズ判定部の一例である。
【００４８】
本発明の実施形態に係る情報処理装置１は、さらに、テキストオブジェクトの表示位置を決定する表示位置決定処理を行ってもよい。
【００４９】
［表示位置決定処理］
以下、図８を参照しつつ、制御装置２００の制御部２１０によって実行される表示位置決定処理の手順の一例について説明する。前記表示位置決定処理は、本発明の情報処理方法の一例である。前記表示位置決定処理は、オブジェクト生成部２１３によりテキストオブジェクトが生成されることにより開始される。
【００５０】
ステップＳ２０１において、制御部２１０（表示処理部２１４）は、今回入力された手書きオブジェクトＡ２に対応するテキストオブジェクトＴ２が、直前に入力された手書きオブジェクトＡ１に対応するテキストオブジェクトＴ１の所定範囲内にあるか否かを判定する。テキストオブジェクトＴ２がテキストオブジェクトＴ１の所定範囲内にある場合（Ｓ２０１：ＹＥＳ）、処理はステップＳ２０２に移行し、テキストオブジェクトＴ２がテキストオブジェクトＴ１の所定範囲内にない場合（Ｓ２０１：ＮＯ）、処理はステップＳ２０５に移行する。ステップＳ２０５では、制御部２１０（表示処理部２１４）は、手書きオブジェクトＡ２の位置にテキストオブジェクトＴ２を表示させる。
【００５１】
ステップＳ２０２において、制御部２１０（表示処理部２１４）は、テキストオブジェクトＴ２の縦方向の中心が、テキストオブジェクトＴ１の上端から下端の間に位置するか否かを判定する。前記中心がテキストオブジェクトＴ１の上端から下端の間に位置する場合（Ｓ２０２：ＹＥＳ）、処理はステップＳ２０３に移行し、前記中心がテキストオブジェクトＴ１の上端から下端の間に位置しない場合（Ｓ２０２：ＮＯ）、処理はステップＳ２０８に移行する。
【００５２】
ステップＳ２０３において、制御部２１０（表示処理部２１４）は、テキストオブジェクトＴ２の左端がテキストオブジェクトＴ１の右端より右側に位置するか否かを判定する。テキストオブジェクトＴ２の左端がテキストオブジェクトＴ１の右端より右側に位置する場合（Ｓ２０３：ＹＥＳ）、処理はステップＳ２０４に移行し、テキストオブジェクトＴ２の左端がテキストオブジェクトＴ１の右端より右側に位置しない場合（Ｓ２０３：ＮＯ）、処理はステップＳ２０６に移行する。
【００５３】
ステップＳ２０４において、制御部２１０（表示処理部２１４）は、テキストオブジェクトＴ２の上端をテキストオブジェクトＴ１の上端に合わせ、テキストオブジェクトＴ２の左端をテキストオブジェクトＴ１の右端に合わせて表示させる。図９は、ステップＳ２０４の処理に対応する表示画面の一例を示している。尚、図９において、テキストオブジェクトＴ１の上下の横点線は上端及び下端を示し、テキストオブジェクトＴ２の中央の横点線は中心を示している。また図９において、縦点線はテキストオブジェクトＴ１の右端、及び、テキストオブジェクトＴ２の左端を示している。
【００５４】
ステップＳ２０６において、制御部２１０（表示処理部２１４）は、テキストオブジェクトＴ２の右端がテキストオブジェクトＴ１の左端より左側に位置するか否かを判定する。テキストオブジェクトＴ２の右端がテキストオブジェクトＴ１の左端より左側に位置する場合（Ｓ２０６：ＹＥＳ）、処理はステップＳ２０７に移行し、テキストオブジェクトＴ２の右端がテキストオブジェクトＴ１の左端より左側に位置しない場合（Ｓ２０６：ＮＯ）、処理はステップＳ２０８に移行する。
【００５５】
ステップＳ２０７において、制御部２１０（表示処理部２１４）は、テキストオブジェクトＴ２の上端をテキストオブジェクトＴ１の上端に合わせ、テキストオブジェクトＴ２の右端をテキストオブジェクトＴ１の左端に合わせて表示させる。図１０は、ステップＳ２０７の処理に対応する表示画面の一例を示している。
【００５６】
ステップＳ２０８において、制御部２１０（表示処理部２１４）は、テキストオブジェクトＴ２の縦方向の中心が、テキストオブジェクトＴ１の縦方向の中心より上側に位置するか否かを判定する。テキストオブジェクトＴ２の縦方向の中心がテキストオブジェクトＴ１の縦方向の中心より上側に位置する場合（Ｓ２０８：ＹＥＳ）、処理はステップＳ２０９に移行し、テキストオブジェクトＴ２の縦方向の中心がテキストオブジェクトＴ１の縦方向の中心より上側に位置しない場合（Ｓ２０８：ＮＯ）、処理はステップＳ２１０に移行する。
【００５７】
ステップＳ２０９において、制御部２１０（表示処理部２１４）は、テキストオブジェクトＴ２の下端をテキストオブジェクトＴ１の上端に合わせ、テキストオブジェクトＴ２の左端をテキストオブジェクトＴ１の左端に合わせて表示させる。図１１は、ステップＳ２０９の処理に対応する表示画面の一例を示している。
【００５８】
ステップＳ２１０において、制御部２１０（表示処理部２１４）は、テキストオブジェクトＴ２の上端をテキストオブジェクトＴ１の下端に合わせ、テキストオブジェクトＴ２の左端をテキストオブジェクトＴ１の左端に合わせて表示させる。図１２は、ステップＳ２１０の処理に対応する表示画面の一例を示している。
【００５９】
上述の構成によれば、テキスト変換されたテキストオブジェクトＴ１，Ｔ２の位置のばらつきを防ぎ見た目が揃うため、表示品位を向上させることができる。
【００６０】
本発明の実施形態に係る情報処理装置１は、さらに、複数のテキストオブジェクトをグループ化する構成を備えてもよい。例えば、制御部２１０は、前記オブジェクト表示処理において、テキストオブジェクトＴ２を、テキストオブジェクトＴ１のフォントサイズと同一のサイズに決定して表示させる処理を行った場合、テキストオブジェクトＴ１，Ｔ２を同一のグループにグループ化する。そして、例えば図１３に示すように、テキストオブジェクトＴ１，Ｔ２がグループ化された場合において、ユーザが表示画面において一方のオブジェクト（テキストオブジェクトＴ２）をＤ１方向に移動させる操作を行った場合、制御部２１０は、テキストオブジェクトＴ２のグループＧ１に属する他方のオブジェクト（テキストオブジェクトＴ１）を、テキストオブジェクトＴ２と同一の移動方向及び移動量で移動させる。尚、テキストオブジェクトＴ３は、テキストオブジェクトＴ１，Ｔ２の所定範囲内にないため、同一のグループＧ１にグループ化されない。制御部２１０は、本発明のグルーピング部の一例である。
【００６１】
また、制御部２１０は、さらに、グループ化されたテキストオブジェクを移動させた場合に、同一のグループに属する複数のテキストオブジェクトの表示位置を調整する処理を行ってもよい。例えば図１４に示すように、テキストオブジェクトＴ１，Ｔ２がグループ化された場合において、ユーザが表示画面においてテキストオブジェクトＴ２をＤ１方向に移動させる操作を行った場合、制御部２１０（表示処理部２１４）は、テキストオブジェクトＴ２のグループＧ１に属するテキストオブジェクトＴ１を、テキストオブジェクトＴ２と同一の移動方向及び移動量で移動させるとともに、テキストオブジェクトＴ１，Ｔ２の左端を揃える処理を行う。
【００６２】
また、本発明の実施形態に係る情報処理装置１は、テキストオブジェクトの先頭文字の内容に基づいて、テキストオブジェクトのフォントサイズ及び表示位置を決定してもよい。例えば、制御部２１０は、手書きオブジェクトＡ１，Ａ２（図１５参照）をテキスト変換処理した結果、テキストオブジェクトの先頭文字が同一の記号である場合には、図１６に示すように、手書きオブジェクトＡ１，Ａ２に対応するテキストオブジェクトＴ１，Ｔ２のフォントサイズを同一のサイズに決定し、表示位置を合わせて表示させる。手書きオブジェクトＡ３，Ａ４に示すように、前記先頭文字に関連性がある場合にも同様の処理を行う。
【００６３】
尚、本発明に係る情報処理装置１は、各請求項に記載された発明の範囲において、以上に示された各実施形態を自由に組み合わせること、或いは各実施形態を適宜、変形又は一部を省略することによって構成されることも可能である。
【符号の説明】
【００６４】
１        ：情報処理装置
１００    ：タッチパネルディスプレイ
１１０    ：タッチパネル
１２０    ：表示部
２００    ：制御装置
２１０    ：制御部
２１１    ：入力検出部
２１２    ：テキスト変換部
２１３    ：オブジェクト生成部
２１４    ：表示処理部
２２０    ：記憶部
２２１    ：コンピュータプログラム
２２２    ：オブジェクト情報
３００    ：タッチペン
【図１】
2020071799.tif 000003
【図２】
2020071799.tif 000004
【図３】
2020071799.tif 000005
【図４】
2020071799.tif 000006
【図５】
2020071799.tif 000007
【図６】
2020071799.tif 000008
【図７】
2020071799.tif 000009
【図８】
2020071799.tif 000010
【図９】
2020071799.tif 000011
【図１０】
2020071799.tif 000012
【図１１】
2020071799.tif 000013
【図１２】
2020071799.tif 000014
【図１３】
2020071799.tif 000015
【図１４】
2020071799.tif 000016
【図１５】
2020071799.tif 000017
【図１６】
2020071799.tif 000018