(57)【要約】【課題】  簡単な操作により、ＨＴＭＬ文書の編集中にカメラ撮影を開始し、当該カメラ撮影により生成された新規画像を編集中のＨＴＭＬ文書に追加することができる文書編集装置を提供することを目的とする。【解決手段】  ＨＴＭＬ文書の編集中における入力文字列の変換候補の一つとして画像取得シンボル１５ｓが表示され、ユーザが当該画像取得シンボル１５ｓを選択することにより、その後のカメラ撮影により生成された新規画像を編集中のＨＴＭＬ文書に追加することができる。このため、編集中のＨＴＭＬ文書へ文字列を追加する場合と同様の操作によって、文書編集中にカメラ撮影の開始を指示することができ、文書編集中における文字列入力と新規画像追加の操作を統一し、文書編集装置としての操作性を向上させることができる。【選択図】  図７
2012014332.tif 000002
【特許請求の範囲】
【請求項１】
文字及び画像からなる編集文書が表示された編集画面内に、ユーザ操作により移動可能なカーソルが表示され、上記カーソルの位置を基準として、上記編集文書に文字及び画像を追加することができる文書編集装置において、
ユーザ操作に基づいて新規文字列が入力される文字列入力手段と、
変換前文字列に対し１又は２以上の変換後文字列を対応づけて記憶する文字列変換辞書と、
上記文字列変換辞書を用いて、上記新規文字列の変換候補として、１又は２以上の変換候補文字列を決定する変換候補決定手段と、
上記変換候補文字列を表示する変換候補表示手段と、
上記変換候補文字列のいずれか一つをユーザが選択するための変換候補選択手段と、
選択された上記変換候補文字列を上記編集文書に追加する文書編集手段と、
光電変換素子の出力に基づいて生成された画像を取得する画像取得手段とを備え、
上記変換候補表示手段は、上記変換候補文字列及び特定文字列の比較結果に基づいて、画像取得シンボルを表示し、
上記画像取得シンボルが選択された場合に、上記画像取得手段が、上記画像取得シンボルの選択後における光電変換素子の出力に基づいて新たに生成された新規画像を取得し、
上記文書編集手段が、上記新規画像を上記編集文書に追加することを特徴とする文書編集装置。
【請求項２】
文字からなる編集文書が表示された編集画面内に、ユーザ操作により移動可能なカーソルが表示され、上記カーソルの位置を基準として、上記編集文書に文字を追加することができる文書編集装置において、
ユーザ操作に基づいて新規文字列が入力される文字列入力手段と、
変換前文字列に対し１又は２以上の変換後文字列を対応づけて記憶する文字列変換辞書と、
上記文字列変換辞書を用いて、上記新規文字列の変換候補として、１又は２以上の変換候補文字列を決定する変換候補決定手段と、
上記変換候補文字列を表示する変換候補表示手段と、
上記変換候補文字列のいずれか一つをユーザが選択するための変換候補選択手段と、
選択された上記変換候補文字列を上記編集文書に追加する文書編集手段と、
光電変換素子の出力に基づいて生成された画像から読み取った文字を取得する読取文字取得手段とを備え、
上記変換候補表示手段は、上記変換候補文字列及び特定文字列の比較結果に基づいて、画像取得シンボルを表示し、
上記画像取得シンボルが選択された場合に、上記読取文字取得手段が、上記画像取得シンボルの選択後における光電変換素子の出力に基づいて新たに生成された画像から読み取った読取文字を取得し、
上記文書編集手段が、上記読取文字を上記編集文書に追加することを特徴とする文書編集装置。
【請求項３】
上記変換候補選択手段による過去の選択履歴に基づいて、上記画像取得シンボルを含む上記変換候補の優先順位を決定する優先順位決定手段を備え、
上記変換候補表示手段は、上記変換候補の一つとして上記画像取得シンボルを表示するとともに、上記優先順位に基づいて、上記画像取得シンボルを含む上記変換候補の表示順序を異ならせることを特徴とする請求項１又は２に記載の文書編集装置。
【請求項４】
上記変換候補選択手段による過去の選択履歴に基づいて、上記新規文字列の一部が入力された時点で上記新規文字列の全体を予測する文字列予測手段を備え、
上記変換候補表示手段は、予測された新規文字列に基づいて、上記画像取得シンボルを表示することを特徴とする請求項１又は２に記載の文書編集装置。
【請求項５】
上記画像取得手段が、カメラを用いて生成された画像を取得することを特徴とする請求項１、３又は４に記載の文書編集装置。
【請求項６】
上記画像取得手段が、スキャナを用いて生成された画像を取得することを特徴とする請求項１、３及び４に記載の文書編集装置。
【請求項７】
上記光電変換素子を有する外部装置との通信を行う通信手段を備え、
上記画像取得手段が、上記通信手段を介して、上記外部装置に対し、上記新規画像の生成要求及び取得を行うことを特徴とする請求項１、３又は４に記載の文書編集装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、文書編集装置に係り、更に詳しくは、文字及び画像からなる編集文書を編集するための文書編集装置の改良に関する。例えば、携帯電話機、ＰＨＳ電話機、ＰＤＡ装置、パーソナルコンピュータのようなＨＴＭＬ文書の編集機能を有する情報端末装置の改良に関する。
【背景技術】
【０００２】
最近の携帯電話機は、メール本文がＨＴＭＬ文書からなるＨＴＭＬメールを送受信する機能を有しているものが多い。ＨＴＭＬ文書は、ＨＴＭＬ（Hyper Text Markup Language）言語で記述された文書であり、文字及び画像を混在させて表示することができ、ウェブサイトや電子メールの記述言語として広く知られている。
【０００３】
一般に、ＨＴＭＬ文書は、テキストエディタを用いてソースコードを直接編集することもできるが、この様な編集を行うためには、ユーザにＨＴＭＬ言語に関する専門知識が必要となる。このため、携帯電話機のように、一般のユーザを対象とするＨＴＭＬ文書の編集装置では、編集画面内にＨＴＭＬ文書及びカーソルを表示し、当該カーソルの位置を基準として、ユーザが指定した文字や画像を追加又は削除するように構成されている。通常、文字の追加は、ユーザが入力した文字列を漢字変換して得られた文字列が、カーソル位置に追加される。また、画像の追加は、ユーザが、画像ファイルを指定することによって、カーソル位置に追加される。
【０００４】
このようなＨＴＭＬ文書編集装置では、文字列を追加するための編集操作と、画像を追加するための編集操作が大きく異なっており、操作性が悪いという問題があった。そこで、文字列の追加と同様の編集操作によって、画像の追加を行うことができるＨＴＭＬ文書編集装置が従来から提案されている（例えば、特許文献１）。
【０００５】
特許文献１に記載されたＨＴＭＬ文書編集装置では、画像に対し文字列を予め対応づけておくことにより、入力文字列の変換候補として、文字列のみならず画像も表示することができる。このため、ユーザは、編集文書に文字列を追加する場合と同様にして、入力文字列を画像に変換し、当該画像を編集文書に追加することができる。このため、編集文書に画像を容易に追加することができるとともに、文字列追加と画像追加の操作を統一することができ、文書編集装置の操作性を向上させることができる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００８−１７６３６７
【発明の概要】
【発明が解決しようとする課題】
【０００７】
従来の文書編集装置において、入力文字列を変換して追加することができる画像は、予め文字列を対応づけられた画像に限られる。このため、従来の文書編集装置では、文字列変換により任意の画像を文書に追加することはできないという問題があった。特に、携帯電話機のようなカメラを有する文書編集装置において、文書編集中に撮影された新規画像を当該文書に追加しようとする場合に、このような従来技術を適用することができない。
【０００８】
カメラを有する文書編集装置において、文書編集中にカメラ撮影を行い、その撮影画像を当該文書に追加しようとする場合、文書編集プログラムを一旦終了してカメラを起動する必要がある。そして、カメラ撮影により撮影画像を取得すれば、当該画像に名前を付けて画像ファイルとして一旦保存する必要がある。その後、文書編集プログラムを再び起動し、その編集画面から上記名前を指定して画像ファイルを呼び出して、文書中に追加する必要があった。つまり、文書編集中にカメラ撮影を行って、その撮影画像を文書に追加するためには、煩雑な操作を行う必要があった。
【０００９】
また、文書編集プログラムを中断することなく、文書編集中のメニュー操作によってカメラを起動できる文書編集装置であったとしても、カメラを起動するために、特別なメニュー操作を行う必要があり、当該操作が煩雑でわかりにくくなる。特に、このような機能を有する多機能の文書編集装置では、メニューに含まれる選択項目が多く、その階層も深いために、使いづらいという問題があった。
【００１０】
本発明は、上記の事情に鑑みてなされたものであり、文書編集中に撮影された画像を編集中の文書に追加することができる文書編集装置の操作性を向上させることを目的とする。特に、文書編集中に撮影を開始するための操作を容易化することを目的とする。また、撮影画像を編集中の文書に追加する操作を容易化することを目的とする。また、これらの操作と、文字列追加のための操作とを統一することを目的とする。
【００１１】
また、本発明は、文書編集中における光電変換素子の出力に基づいて新たに生成された新規画像を編集中の文書に追加することができる文書編集装置の操作性を向上させることを目的とする。特に、文書編集中に光電変換素子を用いた画像取得を開始するための操作を容易化することを目的とする。また、光電変換素子により生成された新規画像を編集中の文書に追加する操作を容易化することを目的とする。また、これらの操作と、文字列追加のための操作とを統一することを目的とする。
【課題を解決するための手段】
【００１２】
本発明は、文字及び画像からなる編集文書が表示された編集画面内に、ユーザ操作により移動可能なカーソルが表示され、上記カーソルの位置を基準として、上記編集文書に文字及び画像を追加することができる文書編集装置に関する。
【００１３】
第１の本発明による文書編集装置は、ユーザ操作に基づいて新規文字列が入力される文字列入力手段と、変換前文字列に対し１又は２以上の変換後文字列を対応づけて記憶する文字列変換辞書と、上記文字列変換辞書を用いて、上記新規文字列の変換候補として、１又は２以上の変換候補文字列を決定する変換候補決定手段と、上記変換候補文字列を表示する変換候補表示手段と、上記変換候補文字列のいずれか一つをユーザが選択するための変換候補選択手段と、選択された上記変換候補文字列を上記編集文書に追加する文書編集手段と、光電変換素子の出力に基づいて生成された画像を取得する画像取得手段とを備えて構成される。そして、上記変換候補表示手段は、上記変換候補文字列及び特定文字列の比較結果に基づいて、画像取得シンボルを表示し、上記画像取得シンボルが選択された場合に、上記画像取得手段が、上記画像取得シンボルの選択後における光電変換素子の出力に基づいて新たに生成された新規画像を取得し、上記文書編集手段が、上記新規画像を上記編集文書に追加するように構成される。
【００１４】
この様な構成により、編集文書に文字列を追加する場合と同様の操作により、光電変換素子を用いた新規画像の取得を指示することができる。従って、文書編集中における文字列追加と新規画像追加の操作とを統一することができ、文書編集装置としての操作性を向上させることができる。また、文書編集中に取得した新規画像をカーソルの位置を基準として追加することにより、新規画像を編集中の文書に容易に追加することができる。さらに、文書編集中における新規画像の取得と、その後の編集文書への追加という一連の処理を煩雑な操作を行うことなく実現することができる。
【００１５】
第２の本発明による文書編集装置は、ユーザ操作に基づいて新規文字列が入力される文字列入力手段と、変換前文字列に対し１又は２以上の変換後文字列を対応づけて記憶する文字列変換辞書と、上記文字列変換辞書を用いて、上記新規文字列の変換候補として、１又は２以上の変換候補文字列を決定する変換候補決定手段と、上記変換候補文字列を表示する変換候補表示手段と、上記変換候補文字列のいずれか一つをユーザが選択するための変換候補選択手段と、選択された上記変換候補文字列を上記編集文書に追加する文書編集手段と、光電変換素子の出力に基づいて生成された画像から読み取った文字を取得する読取文字取得手段とを備え、上記変換候補表示手段は、上記変換候補文字列及び特定文字列の比較結果に基づいて、画像取得シンボルを表示し、上記画像取得シンボルが選択された場合に、上記読取文字取得手段が、上記画像取得シンボルの選択後における光電変換素子の出力に基づいて新たに生成された画像から読み取った読取文字を取得し、上記文書編集手段が、上記読取文字を上記編集文書に追加するように構成される
【００１６】
この様な構成により、編集文書に文字列を追加する場合と同様の操作により、光学式文字読取装置（ＯＣＲ）を用いた読取文字の取得を指示することができる。従って、ユーザが具体的に指定した文字列を追加する操作と、新規画像を取得し、更に当該新規画像から文字を抽出して抽出文字を追加する操作とを統一することができ、文書編集装置としての操作性を向上させることができる。
【００１７】
第３の本発明による文書編集装置は、上記構成に加えて、上記変換候補選択手段による過去の選択履歴に基づいて、上記画像取得シンボルを含む上記変換候補の優先順位を決定する優先順位決定手段を備え、上記変換候補表示手段が、上記変換候補の一つとして上記画像取得シンボルを表示するとともに、上記優先順位に基づいて、上記画像取得シンボルを含む上記変換候補の表示順序を異ならせるように構成される。
【００１８】
この様な構成により、文書編集中に新規画像を取得する機能の利用頻度に応じて、画像取得シンボル及び変換候補の表示順序を異ならせ、ユーザの利便性を向上させることができる。
【００１９】
第４の本発明による文書編集装置は、上記構成に加えて、上記変換候補選択手段による過去の選択履歴に基づいて、上記新規文字列の一部が入力された時点で上記新規文字列の全体を予測する文字列予測手段を備え、上記変換候補表示手段は、予測された新規文字列に基づいて、上記画像取得シンボルを表示するように構成される。
【００２０】
この様な構成により、より少ない文字数を入力するだけで、画像取得シンボルを変換候補として表示させ、ユーザの利便性を向上させることができる。
【００２１】
第５の本発明による文書編集装置は、上記構成に加えて、上記画像取得手段が、カメラを用いて生成された画像を取得するように構成される。
【００２２】
第６の本発明による文書編集装置は、上記構成に加えて、上記画像取得手段が、スキャナを用いて生成された画像を取得することを特徴とするように構成される。
【００２３】
第７の本発明による文書編集装置は、上記構成に加えて、上記光電変換素子を有する外部装置との通信を行う通信手段を備え、上記画像取得手段が、上記通信手段を介して、上記外部装置に対し、上記新規画像の生成要求及び取得を行うように構成される。
【発明の効果】
【００２４】
本発明によれば、文書編集中に撮影された画像を編集中の文書に追加することができる文書編集装置の操作性を向上させることができる。特に、文書編集中に撮影を開始するための操作を容易化することができる。また、撮影画像を編集中の文書に追加する操作を容易化することができる。また、これらの操作と、文字列追加のための操作とを統一することができる。
【００２５】
また、本発明によれば、文書編集中における光電変換素子の出力に基づいて新たに生成された新規画像を編集中の文書に追加することができる文書編集装置の操作性を向上させることができる。特に、文書編集中に光電変換素子を用いた画像取得を開始するための操作を容易化することができる。また、光電変換素子により生成された新規画像を編集中の文書に追加する操作を容易化することができる。また、これらの操作と、文字列追加のための操作とを統一することができる。
【図面の簡単な説明】
【００２６】
【図１】本発明の実施の形態１による文書編集装置の一例を示した外観図であり、ＨＴＭＬ文書の編集機能を有する携帯電話機１００が示されている。
【図２】図１の表示部１０に表示される編集画面１３の一例を示した図である。
【図３】ＨＴＭＬ文書に文字列を追加する編集方法の一例を示した説明図である。
【図４】ＨＴＭＬ文書に既存画像を追加する編集方法の一例を示した説明図である。
【図５】ＨＴＭＬ文書に新規画像を追加する編集方法の一例を示した説明図である。
【図６】ＨＴＭＬ文書に新規画像を追加する編集方法の一例を示した説明図である（図５の続き）。
【図７】図１の携帯電話機１００の要部についての一構成例を示したブロック図である。
【図８】図７の携帯電話機１００における文書編集処理の一例を示したフローチャートである。
【図９】本発明の実施の形態２による文書編集装置の一構成例を示したブロック図であり、図１の携帯電話機１００内の詳細構成の他の例が示されている。
【図１０】図９の携帯電話機１００における文書編集処理の一例を示したフローチャートである。
【図１１】本発明の実施の形態３による文書編集装置の一構成例を示したブロック図であり、図１の携帯電話機１００内の詳細構成の他の例が示されている。
【図１２】図１１の携帯電話機１００における文書編集処理の一例を示したフローチャートである。
【発明を実施するための形態】
【００２７】
実施の形態１．
図１は、本発明の実施の形態１による文書編集装置の一例を示した外観図であり、ＨＴＭＬ文書の編集機能を有する携帯電話機１００が示されている。この携帯電話機１００は、表示部１０及び操作入力部１１を備え、表示部１０に表示されたＨＴＭＬ文書を見ながら、操作入力部１１を操作することによって、当該ＨＴＭＬ文書を編集することができる。
【００２８】
ＨＴＭＬ文書は、周知のＨＴＭＬ言語によって記述された文書であり、文字情報だけでなく、画像ファイルや音声ファイルへの参照情報も含めることができる。つまり、ＨＴＭＬ文書を表示すれば、文字と、画像及び音声とを混在させて表示することができる。なお、本実施の形態では、文字及び画像を含むＨＴＭＬ文書を編集対象とする例について説明するが、本発明が適用できる文書編集装置は、文字情報と、画像、音声などの非文字情報とを混在させて表示するマルチメディア文書を編集対象とするものであればよく、ＨＴＭＬ文書を編集対象とするものだけに限定されない。
【００２９】
表示部１０は、液晶パネルからなり、ＨＴＭＬ文書の編集時には、編集中のＨＴＭＬ文書が表示される。このため、ユーザは、文字及び画像を含む表示内容を確認しながら、ＨＴＭＬ文書を編集することができる。操作入力部１１は、カーソル移動のための十字キー１１ａ、文字入力のためのテンキー１１ｂ、機能割り当てが画面表示される３つのファンクションキー１１ｃを含む複数の操作キーが表示されている。ユーザは、これらの操作キーを押下操作することによってＨＴＭＬ文書を編集することができる。なお、操作入力部１１は、操作キーに代えて、あるいは、操作キーに加えてタッチパネルを採用することもできる。
【００３０】
図２は、図１の表示部１０に表示される編集画面１３の一例を示した図である。ＨＴＭＬ文書を編集している間、表示部１０には編集画面１３が表示される。また、編集画面１３は、ピクト表示領域１３１、タイトル表示領域１３２、編集領域１３３及び機能割当表示領域１３４の各領域からなる。
【００３１】
ピクト表示領域１３１は、電波受信状態や電池残量等を示すピクトが表示される領域である。タイトル表示領域１３２は、ＨＴＭＬ文書の編集中であることを示す「入力画面」の文字が表示される領域である。編集領域１３３は、編集中のＨＴＭＬ文書が表示される領域であり、カーソル１４が表示されている。機能割当表示領域１３４は、３つのファンクションキーに割り当てられている各機能を表示する領域である。
【００３２】
＜文字列の追加方法＞
図３の（ａ）〜（ｄ）は、ＨＴＭＬ文書の編集方法の一例を示した説明図であり、ＨＴＭＬ文書に文字列を追加する場合における編集画面１３の変化が時系列に示されている。図中の（ａ）には、平仮名「お」が入力された時の編集画面１３が示されている。ユーザが新規文字列を入力した場合、編集領域１３３の一部に変換候補領域１３５が新たに表示され、新規文字列に対応づけられた１又は２以上の変換候補１５ｃ，１５ｉ（総称する場合は１５）が変換候補領域１３５内に表示される。変換候補１５ｃは文字列からなる変換候補であり、変換候補１５ｃは画像からなる変換候補であり、ユーザは、文字列の変換候補１５ｃ及び画像の変換候補１５ｉのいずれかを任意に選択することができる。
【００３３】
文字列の変換候補１５ｃは、変換辞書を用いて、ユーザが入力した文字列を変換して得られる文字列である。ここでは、平仮名からなる文字列を漢字又は片仮名を含む文字列へ変換する最も一般的な文字列変換に加えて、ユーザによって今後入力される平仮名を予測し、予測された文字列についても変換を行う予測変換も行っている。このような予測変換は、過去の入力履歴に基づいて行われており、ユーザが「お」を入力しただけで、変換候補として「お疲れ」、「おやすみ」、「おはよう」、「オーケー」などの複数の変換候補１５ｃが、変換候補領域１３５に表示される。
【００３４】
画像の変換候補１５ｉは、文字列の変換候補１５ｃに基づいて表示される。変換候補１５ｉとして表示される画像は、予め文字列に対応づけて記憶されており、文字列の変換候補１５ｃが、上記画像に対応づけられた文字列と一致すれば、その画像が変換候補１５ｉとして変換候補領域１３５内に表示される。
【００３５】
なお、当然のことながら、変換候補１５ｉとなる画像は、ＨＴＭＬ文書の編集開始までに画像ファイルとして予め用意されている画像（「既存画像」と呼ぶ）である必要がある。ただし、製造時に携帯電話機に格納されるプリセット画像には限定されず、カメラ撮影などによりユーザが作成した画像ファイルであってもよい。ユーザが作成した画像ファイルの場合、当該画像ファイルに所望の文字列をユーザ自身が対応づけ、更に所定のフォルダに格納することにより、変換候補１５ｉの対象となる。また、変換候補１５ｉとして表示される画像は、必要に応じてサムネイル化（所定のサムネイルサイズへの縮小化）して表示される。
【００３６】
図中の（ｂ）には、平仮名の文字列「おは」が入力された時の編集画面１３が示されている。ユーザが「お」に続いて「は」を入力することにより、変換候補領域１３５内の表示が更新され、より的確な変換候補１５ｃ，１５ｉが表示される。ここでは、文字列の変換候補１５ｃとして、「おはよう」、「お話」、「お花」、「お肌」などが表示される。また、これに応じて画像の変換候補１５ｉも更新される。
【００３７】
図中の（ｃ）には、変換候補１５ｃ，１５ｉを選択可能な状態の編集画面１３が示されている。図中の（ａ）の状態において変換キーを押下すれば、ユーザは、変換候補領域１３５内の変換候補１５ｃ，１５ｉを選択することができる。すなわち、変換候補１５ｃ，１５ｉのいずれか一つを指示するフォーカス１６が、変換候補領域１３５内に表示され、当該フォーカス１６を移動させることにより、任意の変換候補１５ｃ，１５ｉを選択することができる。ここでは、フォーカス１６が文字列「おはよう」を指示している状態が示されている。
【００３８】
図中の（ｄ）は、文字列の変換候補１５ｃの選択が確定した時の編集画面１３が示されている。図中の（ｃ）の状態において、ユーザが確定キーを操作すれば、フォーカス１６により指示されている文字列「おはよう」の選択が確定し、ＨＴＭＬ文書中のカーソル１４の位置に文字列「おはよう」が挿入される。つまり、変換後の文字列は、変換キーの操作時におけるカーソル１４の位置に挿入される。
【００３９】
なお、図３の（ｃ）では、変換候補領域１３５内においてフォーカス１６により指示されている文字列「おはよう」とは関係なく、編集領域１３３内には入力文字列「おは」が表示されているが、この様な表示方法に代えて、インライン表示を行ってもよい。つまり、入力文字列「おは」に代えて、フォーカス１６により指示されている確定前の変換候補「おはよう」を編集領域１３３に表示させてもよい。このようなインライン表示を行うことにより、変換候補を確定する前に、確定後における編集領域１３３内の状態を確認することができる。
【００４０】
＜既存画像の追加方法＞
図４の（ａ）〜（ｃ）は、ＨＴＭＬ文書の編集方法の一例を示した説明図であり、既存画像を追加する場合における編集画面１３の変化が時系列に示されている。図中の（ａ）には、文字列「おはようございます」が追加された後、更に平仮名の文字列「お」が入力された時の編集画面１３が示されている。このとき、図３の（ａ）の場合と同様にして、変換候補領域１３５が表示され、当該変換候補領域１３５内に変換候補１５ｃ，１５ｉが表示される。
【００４１】
ここでは、先の変換処理において文字列「おはよう」の選択を確定しているため、文字列の変換候補１５ｃとして「おはよう」が優先的に表示される。つまり、過去の変換履歴に基づいて変換辞書の学習を行っており、ユーザによって過去に選択された変換候補１５ｃの優先順位を高くするように、変換候補領域１３５内における表示順序を入れ替えている。同様にして、画像の変換候補１５ｉについても、文字列「おはよう」に対応づけられている画像の優先順位が高くなり、変換候補領域１３５内における表示順序を入れ替えている。
【００４２】
図中の（ｂ）には、変換候補１５ｃ，１５ｉが選択可能な状態における編集画面１３が示されている。図中の（ａ）の状態において、ユーザが変換キーを押下すれば、変換候補領域１３５内にフォーカス１６が表示される。ここでは、フォーカス１６が「おはよう」に対応づけられた画像の変換候補１５ｉを指示している状態が示されている。
【００４３】
図中の（ｃ）は、画像の変換候補１５ｉの選択が確定した時の編集画面１３が示されている。図中の（ｂ）の状態において、ユーザが確定キーを操作すれば、フォーカス１６により指示されている画像の選択が確定し、ＨＴＭＬ文書中のカーソル１４の位置に当該画像が挿入される。つまり、変換後の画像は、変換キーの操作時におけるカーソル１４の位置に挿入される。このとき、ＨＴＭＬ文書内に挿入される画像は、必要に応じてサムネイル化（所定のサムネイルサイズへの縮小化）される。例えば、サムネイル化するか否かをユーザが選択可能にしてもよい。
【００４４】
＜新規画像の追加方法＞
図５及び図６の（ａ）〜（ｆ）は、ＨＴＭＬ文書の編集方法の一例を示した説明図であり、新規画像の追加時における編集画面１３の変化が時系列に示されている。既存画像をＨＴＭＬ文書に追加する方法については図４を用いて既に説明したが、ここでは、ＨＴＭＬ文書の編集中にカメラを起動し、文書編集中におけるカメラ撮影によって得られた新規画像をＨＴＭＬ文書に追加する方法について説明する。
【００４５】
図５の（ａ）には、ユーザが平仮名「か」を入力した時の編集画面１３が示されている。このとき、変換候補領域１３５内には、文字列の変換候補１５ｃとして「頑張って」、「亀」、「かなり」、「学校」などが表示される。また、画像の変換候補１５ｉとして「頑張れ」「亀」及び「学校」に対応づけられた画像が表示される。
【００４６】
図５の（ｂ）には、ユーザが平仮名「かめ」を入力した時の編集画面１３が示されている。このとき、変換候補領域１３５内には、文字列の変換候補１５ｃとして「亀」、「カメラ」、「仮面」、「画面」などが表示される。また、画像の変換候補１５ｉとして文字列「亀」に対応づけられた画像が表示される。更に、文字列「カメラ」に対応づけられた画像取得シンボル１５ｓが、変換候補の一つとして表示される。
【００４７】
画像取得シンボル１５ｓは、特定文字列「カメラ」に対応づけられ、文字列の変換候補１５ｃが特定文字列「カメラ」と一致すれば、変換候補領域１３５内に変換候補の一つとして表示される。特定文字列は、画像取得シンボル１５ｓに予め対応づけられた文字列であり、ユーザが予め指定したものであってもよい。また、１つの画像取得シンボル１５ｓを２以上の文字列に対応づけてもよい。
【００４８】
つまり、画像取得シンボル１５ｓを変換候補領域１３５内に表示する方法は、画像の変換候補１５ｉの場合と全く同一である。ただし、画像取得シンボル１５ｓは、その選択後にカメラを起動し、カメラ撮影によって新たに取得された新規画像をＨＴＭＬ文書に追加するための選択肢であり、変換候補領域１３５内に画像取得シンボル１５ｓが表示されている時点において、ＨＴＭＬ文書に追加すべき画像ファイルが存在していない点で、画像の変換候補１５ｉとは顕著に異なる。
【００４９】
図５の（ｃ）には、変換候補が選択可能な状態における編集画面１３が示されている。図５の（ｂ）の状態において、ユーザが変換キーを押下すれば、変換候補領域１３５内の変換候補１５ｃ，１５ｉ及び画像取得シンボル１５ｓのいずれかを選択することができる。すなわち、フォーカス１６が変換候補領域１３５内に表示され、当該フォーカス１６を移動させることにより、画像取得シンボル１５ｓを含む変換候補のいずれかを選択することができる。ここでは、フォーカス１６が画像取得シンボル１５ｓを指示している状態が示されている。なお、インライン表示を行う場合、フォーカス１６が画像取得シンボル１５ｓを指示していれば、編集領域１３３内には、入力文字列「かめ」に代えて、画像取得シンボル１５ｓが表示される。
【００５０】
図６の（ｄ）には、カメラ撮影画面１７が表示されている。図５の（ｃ）の状態において、ユーザが、確定キーを操作し、画像取得シンボル１５ｓの選択を確定すれば、カメラが起動され、表示部１０にはカメラ撮影画面１７が表示される。
【００５１】
カメラ撮影画面１７は、通常のカメラ撮影時に表示される画面と同一であり、ピクト表示領域１３１、タイトル表示領域１３２、プレビュー領域１３６及び機能割当表示領域１３４の各領域からなる。プレビュー領域１３６は、本撮影前に被写体の状態やカメラアングルなどを確認するためのプレビュー画像が表示される領域である。ユーザが、このプレビュー画像を見ながらシャッター操作を行えば、撮影画像が生成され、画像ファイルとして格納される。つまり、カメラ撮影によって新規画像が生成される。この新規画像は、カメラ撮影された画像そのものであってもよいが、サイズや色調の調整などの画像処理が行われた後の画像であってもよい。
【００５２】
図６の（ｅ）は、カメラ撮影が終了した時の編集画面１３が示されている。図６の（ｄ）の状態において、ユーザがシャッター操作を行えば、撮影による新規画像が生成され、ＨＴＭＬ文書中のカーソル１４の位置に当該画像が挿入される。つまり、新規画像は、変換キーの操作時におけるカーソル１４の位置に挿入される。このとき、ＨＴＭＬ文書内に挿入される画像は、必要に応じてサムネイル化（所定のサムネイルサイズへの縮小化）される。例えば、サムネイル化するか否かをユーザが選択可能にしてもよい。
【００５３】
図６の（ｆ）は、図６の（ｅ）の状態から、ＨＴＭＬ文書に文字列「今日は、こんなに良い天気！」を追加した後、さらに平仮名「か」を入力して、変換キーを押下操作した時の編集画面１３が表示されている。
【００５４】
先の変換処理において画像取得シンボル１５ｓが選択されたため、この選択履歴に基づいて、変換候補領域１３５内における表示の優先順位が変動している。つまり、画像取得シンボル１５ｓもいわゆる学習機能の対象となっている。このため、今回は、画像取得シンボル１５ｓが「亀」の画像の変換候補１５ｉよりも優先的に表示されている。なお、図中では、画像取得シンボル１５ｓが選択された履歴に基づいて、文字列「カメラ」の変換候補１５ｃも優先的に表示されているが、画像取得シンボル１５ｓの優先度と、文字列「カメラ」の変換候補１５ｃの優先度とは、連動させてもよいし、連動させなくてもよい。
【００５５】
この様な編集方法を採用することにより、文字及び画像を混在させたＨＴＭＬ文書を容易に編集することができる。特に、カメラ撮影を行うための画像取得シンボル１５ｓが、文字列及び画像の変換候補１５ｃ，１５ｉと同様にして、変換候補領域１３５内に表示され、任意に選択することができる。このため、文書編集中にカメラ撮影された新規画像を追加する場合であっても、ユーザは、カメラ撮影のためのメニュー操作などの煩雑な操作を覚える必要がなく、操作方法の統一により、操作性を向上させることができる。また、変換処理の学習機能を活用することにより、ＨＴＭＬ文書に新規画像を追加する頻度に応じて、画像取得シンボル１５ｓを表示させることができる。さらに、入力文字列を予測する予測変換を行うことにより、利用頻度に応じた少ないキー操作によって、ＨＴＭＬ文書に新規画像を追加することができる。
【００５６】
＜ブロック図＞
図７は、図１の携帯電話機１００の要部についての一構成例を示したブロック図である。この携帯電話機１００は、表示部１０、操作入力部１１、入力制御部２１、文字列変換部２２、編集画面生成部２３、文書編集部２４、編集文書記憶部２５、画像取得部２６及びカメラ部２７からなる。
【００５７】
（１）入力制御部２１
入力制御部２１は、文字列入力部２１１、カーソル制御部２１２及びフォーカス制御部２１３からなり、いずれも操作入力部１１からの操作信号に基づいて動作する。文字列入力部２１１は、順に入力されるテンキー１１ｂの操作信号に基づいて、ユーザが入力した新規文字列を判別し、文字列変換部２２へ出力する。カーソル制御部２１２及びフォーカス制御部２１３は、いずれも十字キー１１ａの操作信号に基づいて、編集画面１３内のカーソル１４及びフォーカス１６の移動制御をそれぞれ行っている。カーソル１４は、ＨＴＭＬ文書に含まれる文字及び画像を単位として移動させことができるのに対し、フォーカス１６は、変換候補１５ｃ，１５ｉ及び画像取得シンボル１５ｓを単位として移動させることができる。
【００５８】
（２）文字列変換部２２
文字列変換部２２は、ユーザが入力した新規文字列に基づいて、文書編集部２４へ出力する文字列又は既存画像を決定し、あるいは、画像取得部２６に対し新規画像の取得を指示する。この文字列変換部２２は、変換候補決定部２２１、変換辞書２２２、変換候補表示部２２３、変換候補選択部２２４及び選択履歴記憶部２２５からなる。
【００５９】
変換候補決定部２２１は、文字列入力部２１１からの新規文字列に基づいて、編集画面１３の変換候補領域１３５内に表示する１又は２以上の変換候補を決定する。変換候補は、文字列の変換候補１５ｃ、画像の変換候補１５ｉ又は画像取得シンボル１５ｓからなり、変換辞書２２２を用いて決定される。
【００６０】
変換辞書２２２は、変換前文字列と、変換候補１５ｃ，１５ｉ及び画像取得シンボル１５ｓとの対応関係を保持する記憶手段であり、文字列変換辞書２２ｘ、画像変換辞書２２ｙ及びシンボル辞書２２ｚからなる。文字列変換辞書２２ｘは、変換前文字列を１又は２以上の変換後文字列に対応づけて保持している。また、画像変換辞書２２ｙは、変換前文字列を１又は２以上の画像ファイルに対応づけて保持している。さらに、シンボル辞書２２ｚは、画像取得シンボル１５ｓと対応づけられた１又は２以上の変換前文字列を保持している。例えば、画像取得シンボル１５ｓに対応づけられる変換前文字列は、「カメラ」のみであってもよいし、「カメラ」及び「撮影」であってもよい。
【００６１】
変換候補決定部２２１は、新規文字列を各辞書２２ｘ、２２ｙの変換前文字列と比較し、一致する変換前文字列に対応づけられた文字列又は画像をそれぞれ読み出して変換候補１５ｃ又は１５ｉとする。また、シンボル辞書２２ｚの変換前文字列が、新規文字列又は変換候補１５ｃと一致する場合には、変換候補に画像取得シンボル１５ｓを加える。また、シンボル辞書２２ｚの変換前文字列が、新規文字列又は変換候補１５ｃに含まれる場合に、変換候補に画像取得シンボル１５ｓを加えてもよい。
【００６２】
さらに、変換候補決定部２２１は、優先度決定部２２ａ及び文字列予測部２２ｂを有している。優先度決定部２２ａは、過去の変換履歴に基づいて、変換候補１５ｃ，１５ｉ，１５ｓの優先順位を決定する。この優先順位は、変換候補領域１３５内における表示順位として変換候補表示部２２３によって用いられる。また、文字列予測部２２ｂは、過去の変換履歴に基づいて、新規文字列の一部が入力された時点で、新規文字列の全体を予測する。
【００６３】
つまり、優先度決定部２２ａによって、ユーザが変換候補を容易に選択できる学習機能を実現し、文字列予測部２２ｂによって、ユーザが入力すべき文字数を減少させることができる予測変換機能を実現している。
【００６４】
変換候補表示部２２３は、変換候補決定部２２１が決定した変換候補１５ｃ，１５ｉ，１５ｓに基づいて、変換候補領域１３５の表示データを生成し、編集画面生成部２３へ出力する。
【００６５】
変換候補選択部２２４は、確定キーの操作信号に基づいて、確定操作時にフォーカス１６が指示していた変換候補１５ｃ，１５ｉ，１５ｓをユーザの選択結果として確定する。確定した選択結果が、文字列又は画像の変換候補１５ｃ，１５ｉであれば、当該文字列又は画像を文書編集部２４へ出力し、また、画像取得シンボル１５ｓであれば、画像取得部２６へ画像取得を指示する。また、確定した選択結果は、選択履歴記憶部２２５に格納され、優先度決定部２２ａ及び文字列予測部２２ｂによって用いられる。
【００６６】
（３）編集画面生成部２３，表示部１０
編集画面生成部２３は、編集文書記憶部２５から編集文書を読み出し、編集領域１３３の表示データを生成する。また、変換候補領域１３５を表示させる場合には、編集領域１３３を縮小し、変換候補表示部２２３が生成した変換候補領域１３５の表示データを追加して、編集画面１３の表示データを生成する。この様にして生成された編集画面１３の表示データは、表示部１０へ出力され、編集画面１３が画面表示される。表示部１０は、文書編集時には編集画面生成部２３からの表示データに基づいて編集画面１３を表示し、カメラ撮影時にはカメラ部２７からの表示データに基づいて、カメラ撮影画面１７を表示している。
【００６７】
（４）文書編集部２４，編集文書記憶部２５
文書編集部２４は、編集文書記憶部２５に保持されている編集文書の編集を行っている。ここでは、カーソル１４の位置を基準として、文字列又は画像を追加している。文字列及び既存画像は、文字列変換部２２から与えられ、新規画像は、画像取得部２６から与えられる。
【００６８】
（５）画像取得部２６，カメラ部２７
画像取得部２６は、変換候補選択部２２４からの画像取得の指示に基づいて、カメラ部２７に起動要求を出力し、起動後のカメラ撮影によって生成された新規画像をカメラ部２７から取得し、文書編集部２４へ出力する。カメラ部２７は、ＣＣＤ（Charge Coupled Device）などの撮像素子を有する撮影手段であり、画像取得部２６からの起動要求に基づいて撮影を行い、当該撮影により生成された新規画像を出力する。なお、撮影のためのシャッター操作は、ユーザが行ってもよいし、自動的に行われるようにしてもよい。
【００６９】
＜フローチャート＞
図８のステップＳ１０１〜Ｓ１１２は、図７の携帯電話機１００における文書編集処理の一例を示したフローチャートである。文書編集は、表示部１０に編集画面１３が表示されている状態において、操作入力部１１を用いてユーザが新規文字列を入力することにより行われる（ステップＳ１０１）。新規文字列が入力されると、編集画面１３内に変換候補領域１３５が表示される（ステップＳ１０２）。この変換候補領域１３５には、新規文字列に対応する変換候補１５ｃ，１５ｉ，１５ｓが示されている。
【００７０】
変換候補領域１３５が表示されている状態で、ユーザが変換キーを操作すれば（ステップＳ１０４）、変換候補領域１３５内にフォーカス１６が表示される。このときテンキーを操作してフォーカス１６を移動させれば、変換候補領域１３５内に表示されている任意の変換候補を選択することができる（ステップＳ１０４）。所望の変換候補を選択している状態で、ユーザが確定キーを操作すれば、ユーザによる選択結果が確定される（ステップＳ１０５）。画像取得シンボル１５ｓ以外の変換候補、つまり、文字列又は画像の変換候補１５ｃ，１５ｉの選択が確定した場合、当該文字列又は既存画像が編集文書中のカーソル位置に挿入され、当該処理を終了する（ステップＳ１０６，Ｓ１０７）。
【００７１】
一方、画像取得シンボル１５ｓの選択が確定した場合、画像取得部２６からカメラ部２７へ起動信号が出力され、カメラ部２７が起動される（ステップＳ１０８）。カメラ部２７が起動されることにより、表示部１０には、カメラ撮影画面１７が表示され、このカメラ撮影画面１７内にプレビュー画像が表示される。このプレビュー画像を見ながら、ユーザがシャッター操作を行えば（ステップＳ１０９，Ｓ１１０）、カメラ部２７から撮影に基づく新規画像が出力され（ステップＳ１１１）。この新規画像が編集文書中のカーソル位置に挿入される（ステップＳ１１２）。
【００７２】
本実施の形態による携帯電話機１００は、ＨＴＭＬ文書の編集中における入力文字列の変換候補の一つとして画像取得シンボル１５ｓが表示され、ユーザが当該画像取得シンボル１５ｓを選択することにより、その後のカメラ撮影により生成された新規画像を編集中のＨＴＭＬ文書に追加することができる。つまり、編集中のＨＴＭＬ文書へ文字列を追加する場合と同様の操作によって、カメラ撮影の開始を指示することもできる。従って、文書編集中における文字列入力と新規画像追加の操作を統一することができ、文書編集装置としての操作性を向上させることができる。
【００７３】
また、本実施の形態による携帯電話機１００は、文書編集中におけるカメラ撮影で生成された新規画像が、編集画面１３内のカーソル１４の位置を基準として追加される。このため、カメラ撮影で得られた新規画像を編集中のＨＴＭＬ文書に容易に追加することができる。また、ＨＴＭＬ文書の編集中におけるカメラ撮影と、その後のＨＴＭＬ文書への新規画像追加という一連の処理を煩雑な操作を行うことなく実現することができる。
【００７４】
また、本実施の形態による携帯電話機１００は、画像取得シンボルを含む変換候補について、過去の選択履歴に基づいて優先順位を決定し、当該優先順位に基づいて変換候補の表示順序を異ならせている。つまり、いわゆる学習機能を有する文字列変換処理において、画像取得シンボル１５ｓを含む変換候補を表示させることができる。このため、文書編集中における新規画像追加の利用頻度に応じて、画像取得シンボル１５ｓを含む変換候補の表示順序を異ならせ、ユーザの利便性を向上させることができる。
【００７５】
また、本実施の形態による携帯電話機１００は、過去の選択履歴に基づいて新規文字列の一部が入力された時点で当該新規文字列の全体を予測し、予測された新規文字列に基づいて、上記画像取得シンボルを含む変換候補を表示することができる。つまり、いわゆる予測変換機能を有する文字列変換処理において、画像取得シンボル１５ｓを含む変換候補を表示させることができる。このため、より少ない文字数を入力するだけで、画像取得シンボル１５ｓを変換候補として表示させ、ユーザの利便性を向上させることができる。
【００７６】
実施の形態２．
実施の形態１では、カメラを内蔵する携帯電話機１００において、文書編集中に内蔵カメラを用いて撮影された新規画像を編集中の文書に追加する場合の例について説明した。これに対し、本実施の形態では、文書編集装置以外の外部カメラを用いて、文書編集中に撮影を行い、撮影された画像を編集中の文書に追加する場合について説明する。
【００７７】
図９は、本発明の実施の形態２による文書編集装置の一構成例を示したブロック図であり、図１の携帯電話機１００内の詳細構成の他の例が示されている。図７の携帯電話機１００（実施の形態１）と比較すれば、カメラ部２７に代えて、通信部２８を備えている点で異なる。なお、図７に示された構成要素に相当するブロックには、同一の名称及び符号を付し、重複する説明は省略する。
【００７８】
通信部２８は、無線又は有線の通信回線を介して、外部装置と通信するための通信手段である。携帯電話機１００の場合、基地局との間で無線通信を行うための無線通信手段であり、基地局及び移動体通信網などを介して、カメラを有する外部装置と通信することができる。
【００７９】
画像取得部２６は、変換候補選択部２２４から画像取得が指示された場合、通信部２８を介して、外部装置に対し撮影要求を送信する。また、この撮影要求に基づいて外部装置が撮影した新規画像を外部装置から受信し、文書編集部２４へ出力する。
【００８０】
図１０のステップＳ２０１〜Ｓ２１０は、図９の携帯電話機１００における文書編集処理の一例を示したフローチャートである。図８のフローチャートと比較すれば、ステップＳ１０８〜Ｓ１１１に代えて、ステップＳ２０８，Ｓ２０９を有している点で異なる。なお、図８と重複するステップについての説明は省略する。
【００８１】
ユーザが、画像取得シンボル１５ｓを選択し、確定キーを操作することによって、画像取得シンボル１５ｓの選択が確定した場合、文書編集中の携帯電話機１００から外部装置へ撮影要求が送信される（ステップＳ２０８）。すなわち、携帯電話機１００のカメラを用いて撮影を行うのではなく、外部装置に対して新規画像の生成を指示する。この撮影要求に基づいて、外部装置はカメラを起動し、カメラ撮影を行って新規画像を生成し、携帯電話機１００へ送信する。この新規画像を受信した携帯電話機１００は、編集文書中のカーソル位置へ当該新規画像を追加する（ステップＳ２０９，Ｓ２１０）。
【００８２】
本実施の形態によれば、カメラを有する外部装置に対し、通信部２６を介して、新規画像の生成要求及び取得を行うことにより、文書編集中における外部装置でのカメラ撮影によって生成された新規画像を編集中の文書に追加することができる。
【００８３】
なお、上記実施の形態では、カメラ撮影によって生成された新規画像を編集文書に追加する文書編集装置の例について説明したが、本発明は、このような文書編集装置のみには限定されない。すなわち、編集文書に追加される新規画像は、光電変換素子の出力に基づいて生成されたものであればよく、カメラ撮影以外の方法、例えば、スキャナを用いた画像読取により得られる新規画像を対象とする文書編集装置に本発明を適用することもできる。
【００８４】
また、上記実施の形態では、画像取得シンボル１５ｓとして画像を表示する文書撮影装置の例について説明したが、本発明は、このような文書編集装置のみには限定されない。例えば、画像取得シンボル１５ｓとして「画像取得」、「カメラ撮影」などの文字列を表示するものであってもよい。
【００８５】
実施の形態３．
上記実施の形態では、文書の編集中に新たな画像を生成し、当該画像を編集中の文書に追加する文書編集装置の例について説明した。これに対し、本実施の形態では、新たな画像に基づく文字読み取りを行って、読み取られた文字を編集中の文書に追加する文書編集装置について説明する。
【００８６】
図１１は、本発明の実施の形態３による文書編集装置の一構成例を示したブロック図であり、図１の携帯電話機１００内の詳細構成の他の例が示されている。図７の携帯電話機１００（実施の形態１）と比較すれば、画像取得部２６に代えて、読取文字取得部２６’を備え、さらに文字読取部２８を備える点で異なる。なお、図７に示された構成要素に相当するブロックには、同一の名称及び符号を付し、重複する説明は省略する。
【００８７】
読取文字取得部２６’は、変換候補選択部２２４からの画像取得の指示に基づいて、カメラ部２７に起動要求を出力し、起動後のカメラ撮影により撮影された新規画像に含まれる文字を文字読取部２８から取得する。この文字は、文書編集部２４へ出力され、文書編集部２４によって、ＨＴＭＬ文書中のカーソル１４の位置に挿入される。
【００８８】
つまり、本実施の形態では、カメラ部２７及び文字読取部２８によって光学式文字読取装置（ＯＣＲ：Optical Character Reader）が構成され、カメラ部２７により生成された新規画像が、読取文字取得部２６’ではなく、文字読取部２８へ出力される。文字読取部２８では、新規画像に含まれる文字の読取処理が行われ、抽出された文字に相当する文字コードが読取文字取得部２６’へ出力される。なお、文字の読取処理には周知の方法を用いることができる。また、新規画像内に２以上の文字が含まれていれば、これらの文字からなる文字列が読取文字取得部２６’へ出力される。
【００８９】
図１２のステップＳ３０１〜Ｓ３１３は、図１１の携帯電話機１００における文書編集処理の一例を示したフローチャートである。図８のフローチャートと比較すれば、ステップＳ１１２に代えて、ステップＳ３１２，Ｓ３１３を有している点で異なる。なお、図８と重複するステップについての説明は省略する。
【００９０】
カメラ撮影が行われ、カメラ部２７から撮影に基づく新規画像が出力された場合（ステップＳ３１１）、文字読取部２８において、新規画像に含まれる文字の読取処理が行われる（ステップＳ３１２）。この読取処理によって抽出された読取文字は、編集文書中のカーソル位置に挿入される（ステップＳ３１３）。
【００９１】
本実施の形態による携帯電話機１００は、ＨＴＭＬ文書の編集中における入力文字列の変換候補の一つとして画像取得シンボル１５ｓが表示され、ユーザが当該画像取得シンボル１５ｓを選択することにより、その後のカメラ撮影により生成された新規画像から抽出された文字を編集中のＨＴＭＬ文書に追加することができる。つまり、編集中のＨＴＭＬ文書へ文字を追加する場合に、ユーザ操作によって文字列を具体的に指定して追加する場合と同様の操作によって、カメラ撮影及び読取処理の開始を指示することもできる。従って、文書編集中における通常の文字列入力の操作と、光学読取文字を入力するための操作とを統一することができ、文書編集装置としての操作性を向上させることができる。
【００９２】
実施の形態４．
上記実施の形態では、文書の編集中に新たな画像を生成し、当該画像を編集中の文書に追加する文書編集装置の例について説明したが、本発明は、このような文書編集装置のみには限定されない。例えば、文字及びセンシング情報を含む文書を編集することができる文書編集装置において、文書の編集中にセンサを起動し、当該センサの出力に基づいて新たなセンシング情報を生成し、当該センシング情報を編集中の文書に追加する文書編集装置であってもよい。
【００９３】
すなわち、文字及びセンシング情報からなる編集文書が表示された編集画面内に、ユーザ操作により移動可能なカーソルが表示され、上記カーソルの位置を基準として、上記編集文書に文字及びセンシング情報を追加することができる文書編集装置において、ユーザ操作に基づいて新規文字列が入力される文字列入力手段と、変換前文字列に対し１又は２以上の変換後文字列を対応づけて記憶する文字列変換辞書と、上記文字列変換辞書を用いて、上記新規文字列の変換候補として、１又は２以上の変換候補文字列を決定する変換候補決定手段と、上記変換候補文字列を表示する変換候補表示手段と、上記変換候補文字列のいずれか一つをユーザが選択するための変換候補選択手段と、選択された上記変換候補文字列を上記マルチメディア文書に追加する文書編集手段と、センサ出力に基づいて生成された上記センシング情報を取得するセンシング情報取得手段とを備え、上記変換候補表示手段は、上記変換候補文字列及び特定文字列の比較結果に基づいてセンシング情報取得シンボルを表示し、上記センシング情報取得シンボルが選択された場合に、上記センシング情報取得手段が、上記センシング情報取得シンボルの選択後のセンサ出力に基づいて新たに生成されたセンシング情報を取得し、上記文書編集手段が、上記センシング情報を上記編集文書に追加する文書編集装置であってもよい。
【００９４】
このようなセンシング情報には、カメラ撮影された画像や、マイクロフォンにより集音された音声情報が含まれる。例えば、文字及び音声情報からなる文書は、自動読み上げを行った場合に、文字を読み上げるとともに、音声情報の挿入位置に基づいて、当該音声情報が再生される文書として利用することができる。このような文字及び音声情報からなる文書の編集中に、音声取得シンボルの選択が確定すれば、マイクロフォンを起動し、当該マイクロフォンの出力に基づいて新たな音声情報を生成し、当該音声情報を編集中の文書に追加するように構成することができる。
【００９５】
すなわち、文字及び音声情報からなる編集文書が表示された編集画面内に、ユーザ操作により移動可能なカーソルが表示され、上記カーソルの位置を基準として、上記編集文書に文字及び音声情報を追加することができる文書編集装置において、ユーザ操作に基づいて新規文字列が入力される文字列入力手段と、変換前文字列に対し１又は２以上の変換後文字列を対応づけて記憶する文字列変換辞書と、上記文字列変換辞書を用いて、上記新規文字列の変換候補として、１又は２以上の変換候補文字列を決定する変換候補決定手段と、上記変換候補文字列を表示する変換候補表示手段と、上記変換候補文字列のいずれか一つをユーザが選択するための変換候補選択手段と、選択された上記変換候補文字列を上記編集文書に追加する文書編集手段と、集音素子の出力に基づいて生成された音声情報を取得する音声取得手段とを備え、上記変換候補表示手段は、上記変換候補文字列及び特定文字列の比較結果に基づいて、音声取得シンボルを表示し、上記音声取得シンボルが選択された場合に、上記音声取得手段が、上記音声取得シンボルの選択後における集音素子の出力に基づいて新たに生成された新規音声を取得し、上記文書編集手段が、上記新規音声を上記編集文書に追加する文書編集装置であってもよい。
【符号の説明】
【００９６】
１０    表示部
１１    操作入力部
１３    編集画面
１４    カーソル
１５ｃ  文字列の変換候補
１５ｉ  画像の変換候補
１５ｓ  画像取得シンボル
１６    フォーカス
１７    カメラ撮影画面
２１    入力制御部
２１１  文字列入力部
２１２  カーソル制御部
２１３  フォーカス制御部
２２    文字列変換部
２２１  変換候補決定部
２２２  変換辞書
２２３  変換候補表示部
２２４  変換候補選択部
２２５  選択履歴記憶部
２２ａ  優先度決定部
２２ｂ  文字列予測部
２２ｘ  文字列変換辞書
２２ｙ  画像変換辞書
２２ｚ  シンボル辞書
２３    編集画面生成部
２４    文書編集部
２５    編集文書記憶部
２６    画像取得部
２６’  読取文字取得部
２７    カメラ部
２８    通信部
２９    文字読取部
１００  携帯電話機
１３１  ピクト表示領域
１３２  タイトル表示領域
１３３  編集領域
１３４  機能割当表示領域
１３５  変換候補領域
１３６  プレビュー領域
【図１】
2012014332.tif 000003
【図２】
2012014332.tif 000004
【図３】
2012014332.tif 000005
【図４】
2012014332.tif 000006
【図５】
2012014332.tif 000007
【図６】
2012014332.tif 000008
【図７】
2012014332.tif 000009
【図８】
2012014332.tif 000010
【図９】
2012014332.tif 000011
【図１０】
2012014332.tif 000012
【図１１】
2012014332.tif 000013
【図１２】
2012014332.tif 000014