(57)【要約】【課題】名刺画像の入力性および表示性に優れ、画像閲覧に関する処理能力や操作性を向上させた携帯電話機を提供する。【解決手段】画像を取り込む取込手段と、前記取込手段が取り込んだ画像を保存する記憶手段と、前記記憶手段が保存している画像を表示する表示手段と、前記記憶手段が保存している画像を前記表示手段に表示する際に、該画像に含まれる文字列の領域サイズに基づいて各文字列の領域を順次表示する制御手段と、を備える携帯端末とした。【選択図】図１
2006071827.tif 000002
【特許請求の範囲】
【請求項１】
画像を取り込む取込手段と、
前記取込手段が取り込んだ画像を保存する記憶手段と、
前記記憶手段が保存している画像を表示する表示手段と、
前記記憶手段が保存している画像を前記表示手段に表示する際に、該画像に含まれる文字列の領域サイズに基づいて各文字列の領域を順次表示する制御手段と、
を備えることを特徴とする携帯端末。
【請求項２】
前記制御手段は、前記文字列の領域を表示する際に拡大表示することを特徴とする請求項１記載の携帯端末。
【請求項３】
前記制御手段は、前記文字列の領域サイズが小さい順に表示することを特徴とする請求項１記載の携帯端末。
【請求項４】
前記表示手段には、前記画像を表示する第１表示領域と、電話番号を入力可能な第２表示領域とを有し、
前記制御手段は、前記第２表示領域に電話番号が入力された状態で発信処理が行われると、該電話番号に基づいて発信処理を行うことを特徴とする請求項１記載の携帯端末。
【請求項５】
前記表示手段には、前記画像を表示する第１表示領域と、文字や数字を入力可能な第２表示領域とを有し、
前記制御手段は、前記第２表示領域に文字や数字が入力された状態で電話帳への登録処理が行われると、該文字や数字を電話帳に登録することを特徴とする請求項１記載の携帯端末。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像を表示する機能を持つ携帯端末に係り、より詳細には、画像を取り込む機能を有する携帯端末に関する。
【背景技術】
【０００２】
カメラを装備し、画像を撮影することのできる携帯電話機が普及している。画像撮影の目的としては、エンターテイメント、コミュニケーション用途が主であったが、メモ代わりの記録用途としても使われつつある。記録される画像の解像度も増加し、ＶＧＡサイズ(６４０画素×４８０画素)の画像が撮影できるものも開発されている。ところで、現代社会においてビジネスに欠かせないツールとなっているものに名刺があるが、この名刺の情報を簡単に携帯する方法として、名刺の表面をカメラ付き携帯電話機で撮影して保存しておくという方法も行われている。カメラ付き携帯端末装置について下記特許文献が開示している。
【特許文献１】特開２００４-１７７８７４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
名刺の情報取得に関する従来技術の一例として、名刺画像を読み取って、文字認識を行い、データベース化する装置が開発されている。しかしながら、文字認識を行うのは、複雑な処理を伴うため、ハードウェア・ソフトウェアのコストや消費電力等の観点からみて、携帯電話機等の携帯端末で上記機能を実現するのは好ましくない。また、別の装置で認識を行った後、携帯電話機にそのデータを転送する作業を行うというのも、かなり繁雑である。それに、コンピュータによる文字の認識能力には限界があるので、人間による修正作業が必要な場合が多く、より繁雑なものとなる。頻繁に使用しない名刺情報であれば、上記の認識・修正作業を行うよりも、画像のまま保存しておいて必要になったときにその画像を参照した方が、操作が簡単かつ迅速に行えることとなる。
【０００４】
また従来技術の別の例として、名刺画像を保存しておいてそれを表示する装置があるし、名刺のサイズよりも大きなサイズの筐体に、名刺サイズ程度の表示器のつけられたものもある。一般にこの種の装置は、名刺画像を入力する手段と、画像を保存する記憶手段と、画像を表示する表示手段があれば実現が可能であり、構成上は一般的な携帯電話機でも実現でき得る。
【０００５】
しかしながら、携帯電話機では、携帯しやすい形状や大きさにするために、ＬＣＤ等の表示器の大きさも制限されている。このため、名刺全体を表示器に表示した際、一般に小さい文字で書かれている電話番号やＥメールアドレス等の情報を読み取ることは、文字がつぶれやすいこともあって、困難である場合が多い。また、読み取りたい情報が書かれている領域を探し出すスクロール等の操作が必要になり、繁雑であって操作性が良くない。
【０００６】
上述したように、画像の入力および表示が可能な携帯電話機においては、取り込まれた名刺等の住所・電話番号・メールアドレスなどの画像をユーザーが閲覧する際に、小さい文字で書かれた情報が大変読み難く、ユーザーが必要としているメールアドレスや電話番号等の情報表示になかなか到達できない、という問題点があった。
【課題を解決するための手段】
【０００７】
本発明による携帯端末は、上記の課題を解決してその目的を達成するために、次のような手段を用いる。
・本発明による携帯端末は、画像を取り込む取込手段と、前記取込手段が取り込んだ画像を保存する記憶手段と、前記記憶手段が保存している画像を表示する表示手段と、前記記憶手段が保存している画像を前記表示手段に表示する際に、該画像に含まれる文字列の領域サイズに基づいて各文字列の領域を順次表示する制御手段と、を備える。
【０００８】
・前記制御手段は、前記文字列の領域を表示する際に拡大表示する。
・前記制御手段は、前記文字列の領域サイズが小さい順に表示する。
・前記表示手段には、前記画像を表示する第１表示領域と、電話番号を入力可能な第２表示領域とを有し、前記制御手段は、前記第２表示領域に電話番号が入力された状態で発信処理が行われると、該電話番号に基づいて発信処理を行う。
・前記表示手段には、前記画像を表示する第１表示領域と、文字や数字を入力可能な第２表示領域とを有し、前記制御手段は、前記第２表示領域に文字や数字が入力された状態で電話帳への登録処理が行われると、該文字や数字を電話帳に登録する。
【発明の効果】
【０００９】
本発明による携帯端末は、画像の表示性に優れ、画像閲覧に関する処理能力や操作性を向上させることができる。
【発明を実施するための最良の形態】
【００１０】
以下、図１〜１０を参照して、本発明の実施の形態を詳細に説明する。
図１は、本発明の一実施形態にかかる携帯端末の１つである携帯電話機１００を示し、その開いた状態での外観斜視図である。図１には、受話スピーカ１０１、主液晶表示ユニット１０２、着信表示ランプ１０３、キーパッド部１１０が配置される。また、側面部には、カメラスイッチ１０４、ヘッドフォン端子１０５が配置される。そして、このキーパッド部１１０には、ソフトウェアによりその動作を変更できるソフトウェアキー(１１１, １１２, １１３)と、上下左右の方向を指示できる方向キー１１４とが配置される。
【００１１】
つぎの図２は、図１で示した携帯電話機１００の閉じた状態における外観斜視図である。この図２には、カメラ２０１と副液晶表示ユニット２０２が配置されている。また、側面部のカメラスイッチ１０４とヘッドフォン端子１０５とは、図２のように閉じられた状態でも、外部にそのまま露出されている。
【００１２】
そして図３は、本発明の一実施形態にかかる携帯電話機１００のハードウェア構成の主なブロックを示す構成ブロック図である。そのハードウェアは、図３に示すように、無線電波を取り扱う無線部３０１とこれに接続される通話音声の増幅・[Ａ／Ｄ,Ｄ／Ａ]変換を行う音声処理部３１２、この音声処理部３１２に接続されたスピーカ３１１とマイク３１０、電話機の様々な機能の処理を実行するＣＰＵ３０２、このＣＰＵ３０２のバスに接続されたプログラム等を格納するＲＯＭ３０９、一時記憶ＲＡＭ３０８、表示を行う主ＬＣＤ（液晶ディスプレイ）３０３、副ＬＣＤ３０４、ユーザの操作入力のためのキーパッド３０７、カメラスイッチ３０６、および画像入力に用いるカメラ３０５、を備えて構成されている。
【００１３】
図１〜３に示した構成を備える携帯電話機１００を用いて、画像を撮影する場合では、カメラスイッチ３０６(図１では１０４)をスライドさせると、これを検出したＣＰＵ３０２によってカメラアプリケーションが起動され、カメラが動作状態になるとともに、カメラによって入力された（取り込まれた）画像が、リアルタイムに主液晶表示ユニット３０３(図１の１０２)に表示される。
つぎに、保存したい画像が主液晶表示３０３(図１の１０２)に表示された状態で、キーパッド３０７(図１の１０２)のアクションキーを押下すると、表示画像は静止し、ＣＰＵ３０２による圧縮処理後、内蔵したＲＡＭ３０８に保存される。
【００１４】
つぎの図４は、本発明による携帯電話機において、名刺撮影中の画面表示の例を示す図である。撮影中の表示画面は、電池残量／電波強度／時刻等を常に表示している情報表示領域４０１と、カメラ画像を表示する画像表示領域４０２と、カメラの露出を変更するためのキーの説明を表示するキー説明表示領域４０３と、ソフトウェアキーに対応した表示を行うソフトウェアキー表示領域(４０５,４０６,４０７)とを備えて構成される。画像撮影中は、図１の携帯電話機１００において、ソフトウェアキー１１１は撮影画像サイズの変更機能に、ソフトウェアキー１１２はシャッター機能に、ソフトウェアキー１１３はその他各種機能を起動するためのメニュー機能に、それぞれ割り当てられるとよい。
【００１５】
そして、上記方法で撮影され保存された名刺画像を閲覧するには、待ち受け状態からキーパッドを操作して［名刺閲覧モード］を起動する。図５は、その［名刺閲覧モード］の初期画面の一例を示した図である。閲覧中の表示画面は、情報表示領域４０１と、保存されている画像を画面の大きさに縮小表示する画像表示領域５０２と、画像を切替えるためのキーの説明を表示するキー説明表示領域５０３と、ソフトウェアキーに対応した表示を行うソフトウェアキー表示領域(４０５,４０６,４０７)を備えて構成される。
【００１６】
この［名刺閲覧モード］では、図１の携帯電話機１００における方向キー１１４の左方向キー・右方向キーによって、保存されている名刺画像を選択して順次表示させることができる。また、ソフトウェアキー１１３には「メニュー」が、ソフトウェアキー１１２には「小文字拡大」が、ソフトウェアキー１１１には「大文字拡大」がそれぞれ割り当てられるとよい。また、このようにして「メニュー」を操作することにより、画像のメモリからの削除やメールへの添付等の操作も行うことができる。
【００１７】
この名刺閲覧モードの「小文字拡大」では、名刺画像中の１行の文字列の領域のうち小さい文字で構成される文字列領域が画像の下側にあったとすれば、その画像の左下側または右側にある文字列領域の文字列から順次拡大表示するモードに移行できる。
さらに「大文字拡大」では、名刺画像中の１行の文字列の領域のうち大きい文字で構成される文字列領域が画像の上側にあったとすれば、その画像の右上または左上にある文字列領域の文字列から順次拡大表示するモードに移行することができる。
【００１８】
一般に、名刺中に表示された文字の大きさ(文字列の領域サイズ)は、「組織等のロゴ」＞「氏名」＞「会社名」＞「所属・肩書き」＞「住所」＞「電話番号・メールアドレス」となっている場合が多い。また、電話番号・メールアドレスは下側や右側に書かれている場合が多い。このため、小さい文字で構成される文字列領域の文字列を左下にあるものから表示することで、メールアドレスや電話番号等が先に拡大表示される。よって、電話番号やメールアドレスを早く拡大表示したい場合はこのキーを押すことにより、より早く目的の情報に到達できる。
また逆に、大きい文字で構成される文字列領域の文字列を右上にあるものから表示することで、会社のロゴ、会社名、氏名等が先に拡大表示される。よって、会社名等を早く拡大表示させたい場合は、このキーを押すことで、より早く目的の情報に到達できる。
【００１９】
図６は、本発明の携帯電話機における「小文字拡大モード」の画面とその遷移の例を示す図である。「小文字拡大モード」に遷移すると、まず画面６１０が表示される。図６に示すように、小文字拡大モードの画面は、情報表示領域４０１、モード表示領域６０１、拡大画像表示領域６０２、メモ領域６０３、ソフトウェアキー表示領域(６０４,６０５,６０６)を備えて構成される。図６の画面６１０では、図５で例示した名刺画像から抽出された最も小さい文字列である右下の「e-mailアドレス」を示す文字列が拡大表示されている。
【００２０】
ソフトウェアキー表示領域のソフトキー６０５は「次」指示が割り当てられており、対応するソフトキーを押下することにより、次の右下の小さい文字列であるＦＡＸ番号(ＦＡＸ０１ ２３４５ ６７８８)の領域を表示する画面６４０に遷移する。また、ソフトキー６０４には「前」指示が割り当てられており、対応するソフトキーを押下することにより、画面６４０から画面６１０に戻る。
ここで、電話番号が目的の情報とすれば、名刺画像から数えて合計３回のキー操作で目的の情報に到達できることになり、初期画面(図５)→画面６１０→画面６４０→画面６５０のように画面が遷移する。
【００２１】
画面に拡大画像が表示された状態で、文字又は数字を、ユーザーがキーパッドを使用して入力すると、入力された文字又は数字はメモ領域６０３に表示される。これらの入力文字の表示例については図６に示されており、たとえば、画面６１０において電子メールアドレスが文字入力されたときは、つぎの画面６２０でそれがメモ領域６０３に表示されるし、また、画面６５０で電話番号が文字(数字)入力されたときは、つぎの画面６６０でそれがメモ領域６０３に表示される。
【００２２】
メモ領域６０３に表示された文字や数字は、その後、メニューが割り当てられたメニューキー６０６を押下して、アドレス登録を選択し、アドレス帳に登録することもできる。その例を、画面６２０→画面６３０、および画面６６０→画面６７０に示す。
さらに、メニューキー６０６を押下して発信選択する例を画面６６０→画面６８０に、メニューキー６０６を押下してメール送信を選択する例を画面６２０→画面６９０に、それぞれ示す。
【００２３】
このように、本発明にかかる携帯電話機によれば、ユーザーが文字又は数字をキーパッドにより入力することができるので、ユーザーが拡大画像から読み取った数値を携帯電話機に入力する際に、暗記しておいたり他に記録しておいたりする必要はまったくなく、極めて簡便に実行できる。また、画像と入力された文字又は数値とは両方とも同じ画面上で表示することができるし、ユーザーが画像に記録されている情報と入力された文字又は数値とを比較しながら入力できることで、入力ミスのない入力が可能である。
【００２４】
さて、本実施例による携帯電話機では、画像データとして名刺画像を取得して保持しており、この名刺画像の各文字列について領域検出の処理を行って文字列領域を設定し、その文字列領域ごとにその文字列を画面表示することができる。ここで、名刺画像から複数の文字列領域に区分し、文字列領域にある文字列を表示させるための、領域検出の処理をする方法の一例について、図８〜１０を参照して説明する。
【００２５】
図８は名刺画像の一例であり、この名刺画像２００は白黒濃淡の横書きの矩形画像であって、長辺(横方向)と短辺(縦方向)とを有する。そこで、各文字列のある複数の文字列領域を検出するために、名刺画像２００について、まず、文字列の表示方向である長辺方向の周辺分布を作成する。そして、周辺分布のピークを利用して各行を切り出す。つぎに、切り出した各行の領域に対して、先の長辺方向と直交する方向(図８の短辺方向)の周辺分布を作成し、文字列の領域と余白領域とを分離する。
【００２６】
その短辺方向の周辺分布の一例を図９に示す。ここで、周辺分布のピークとピークとの間隔ｄiを求めて、その平均値￣ｄの定数α倍以内に隣接する領域は、同一の文字列のある文字列領域として判断する。（例えばここで定数α倍を３倍として設定してもよい。）そして、文字列領域にある文字の大きさは、領域の短辺方向の幅ｈとして定義し、領域の位置としては領域の左上の画素の座標(x,y)を位置として定義する。
【００２７】
抽出した文字列領域は、図１０に示すような領域テーブルに格納することができる。図１０の領域テーブルおいて、ここでの格納順は、文字列領域のサイズの大きさｈが小さい順として、同じ大きさの場合は座標(x,y)が右下に近い順とする。また、小拡大モードにおいては、この表(領域テーブル)の上から順に(文字列の領域サイズが小さい順に)表示し、大拡大モードにおいては表(領域テーブル)の下から順に(文字列の領域サイズが大きい順に)表示することとする。
【００２８】
さて、図７は、保存されている名刺画像を閲覧するにあたっての拡大モード処理の流れを示すフローチャートであって、図７(１)には名刺上にあるサイズが小さめの文字列を拡大して表示するための小拡大モードの処理を、図７(２)には名刺上にあるサイズが大きめの文字列を拡大して表示するための大拡大モードの処理をそれぞれ示す。名刺画像を閲覧するための［名刺閲覧モード］において、所定のキーを操作することにより、保存されている名刺画像を画面に表示することができるが、図７(１)の場合では小拡大モードを選択し、図７(２)の場合では大拡大モードを選択したものである。
【００２９】
図７(１)において、小拡大モードが選択されたとき(ステップ１０１)には、複数の文字列領域を区分して表示させるための領域検出の処理を行い(ステップ１０２)、つづいて小拡大モードに従って、最小右下領域を拡大表示するモードに移行して所定の画面表示を行い(ステップ１０３)、その後「キー入力待ち(ステップ１０４)」から「入力キー？(ステップ１０５)」となる。
【００３０】
「入力キー？(ステップ１０５)」において、「終了」に割り当てられたキーが押下されたときにはすぐに「ＥＮＤ(ステップ１１４)」に進むが、「発信」に割り当てられたキーが押下されたときには発信機能起動(ステップ１０６)に進み、「アドレス帳起動」に割り当てられたキーが押下されたときにはアドレス帳起動(ステップ１０７)に進み、「メール起動」に割り当てられたキーが押下されたときにはメール発信起動(ステップ１０８)に進み、それらの処理が終わるとエンド(ステップ１１４)となる。
【００３１】
そして「入力キー？(ステップ１０５)」において、次に小さいサイズの文字列を含む領域を表示するための「次」に割り当てられたキーが押下されたときには、次の文字列領域があるかどうかが判定されて(ステップ１０９)、それがあるときには次の文字列領域が拡大表示され(ステップ１１０)、また別に、「前」に割り当てられたキーが押下されたときには、前の文字列領域があるかどうかが判定されて(ステップ１１１)、それがあるときには前の文字列領域が拡大表示される(ステップ１１２)。
【００３２】
さらに「入力キー？(ステップ１０５)」において、画面に拡大画像が表示されている状態で、文字又は数字(数値)をユーザーがキーパッドを使用して入力することができる。このとき追加入力された文字又は数字(数値)は、画面上の所定領域であるメモ領域(図６のメモ領域６０３)において表示される(ステップ１１３)。
【００３３】
さてこれまでは、図７(１)を参照して小拡大モードの処理フローについて述べてきたが、図７(２)の大拡大モードの処理フローについては、「大拡大モード(ステップ２０１)」と「最大左上領域を拡大表示(ステップ２０３)」とが異なる他は、図７(１)の小拡大モードの処理フローとの同じであるので、ここでの重複する説明は省略する。
【００３４】
本発明による携帯端末によれば、取り込んだ画像の電話番号や住所等を目視により読み取る際に、所定の操作によって、電話番号やe-mailアドレス等のような、目的とする情報が書かれている可能性が高い領域候補を検出して、これらを所定の選択および／または所定の順序に従って、その領域にある文字列を画面上に表示または拡大表示することができ、名刺等を取り込んだ画像を表示した場合の情報検索操作を簡便かつ迅速に行うことができる。尚、名刺以外にもレターヘッドや封筒の差出人欄などにも用いることができる。
【００３５】
そして本発明によれば、名刺等をスキャニングした画像を閲覧する際に、画面上に拡大して表示することができるので、小さい文字で書かれた情報が大変読みやすくなる。すなわち、電話番号やe-mailアドレス等は、例えば名刺中の文字列の中では小さな文字で印刷されており、横書きの名刺では右下部分に書かれていることが多い。よって、例えば名刺の場合、小さな文字列で書かれた領域を右下にあるものから選択して順番に拡大表示することで、一般的に目的の情報(例えばＴｅｌ)が表示される順序が先になる場合が多く、平均的な拡大表示の検索時間が大幅に短縮される。そして、名刺画像が縦書きの場合では、小さい文字で構成される領域を例えば左下にあるものから表示することにより、メールアドレス・電話番号等が先に拡大表示されて、電話番号やメールアドレス等の情報により早く到達できる。
【００３６】
さらに、画面に拡大画像が表示された状態で、文字又は数字(数値)を、キーパッドを使用して入力することができ、それらの入力された文字や数字は画面上の所定の領域(例えばメモ部)に表示される。これにより、拡大画像から読み取った文字や数字を携帯電話機に入力する際にもユーザーが暗記や他に記録しておく必要はなく、極めて簡便に文字や数字の入力が実行できる。また、画像と入力された文字や数字とを両方共表示することができ、画像に記録されている情報と入力された文字や数字を比較しながら入力できることとなり、誤りが少ない入力が可能である。
【産業上の利用可能性】
【００３７】
本発明は、画像の入力および表示の手段を有する携帯電話機等の携帯端末において、入力された画像をユーザーが閲覧する際に、小さい文字で書かれた情報が大変読みやすくなり、ユーザーが必要としているメールアドレスや電話番号等の情報表示により早く到達できるという具体的特徴があり、名刺画像の入力性および表示性に優れ、画像閲覧に関する処理能力や操作性を向上させたものである。このような本発明は、携帯電話機のみならず、ＰＤＡや電子ノート等の移動体端末機器や、ノートパソコンなどの小型携帯電子機器など数多くの携帯端末の分野において広く適用することが可能であり、産業上の利用可能性はきわめて大きい。
【図面の簡単な説明】
【００３８】
【図１】本発明の一実施形態にかかる携帯電話機の、開いた状態での正面および側面の外観斜視図である。
【図２】図１の携帯電話機の閉じた状態での正面および側面の外観斜視図である。
【図３】本発明の一実施形態にかかる携帯電話機におけるハードウェア構成の主なブロックを示す構成ブロック図である。
【図４】本発明の一実施形態にかかる携帯電話機における名刺撮影中の画面表示例である。
【図５】同じく、携帯電話機の名刺閲覧モードの初期画面の例である。
【図６】同じく、携帯電話機の小文字拡大モードの画面と遷移の例である。
【図７】本発明の一実施形態にかかる携帯電話機における拡大モードの処理の流れを示すフローチャートである。
【図８】本発明による携帯電話機において領域検出を行うにあたり、白黒濃淡名刺画像の長辺方向の周辺分布の一例を示す図である。
【図９】同じく、短偏方向の周辺分布の一例を示す図である。
【図１０】同じく、領域テーブルの一例を示す図である。
【符号の説明】
【００３９】
１００    本体
１０１    受話スピーカ
１０２    主液晶表示ユニット
１０３    着信表示ランプ
１０４    カメラスイッチ
１０５    ヘッドフォン端子
１１０    キーパッド部
１１１,１１２,１１３    ソフトウェアキー
１１４    方向キー
２０１    カメラ
２０２    副液晶表示ユニット
３０１    無線部
３０２    ＣＰＵ
３０３    主ＬＣＤ
３０４    副ＬＣＤ
３０５    カメラ
３０６    カメラスイッチ
３０７    キーパッド
３０８    ＲＡＭ
３０９    ＲＯＭ
３１０    マイク
３１１    スピーカ
３１２    音声処理部
４０１    情報表示領域
４０２    画像表示領域
４０３    カメラの露出を変更するためのキーの説明を表示する領域
４０５,４０６,４０７    ソフトウェアキー表示領域
５０２    画像表示領域
５０３    画像を切替えるためのキーの説明を表示する領域
５０５,５０６,５０７    ソフトウェアキー表示領域
６１０,６２０,６３０,６４０,６５０,６６０,６７０,６８０,６９０    小文字拡大モードの画面例
６０１    モード表示領域
６０２    拡大画像表示領域
６０３    メモ領域
６０４,６０５,６０６    ソフトウェアキー表示領域
【図１】
2006071827.tif 000003
【図２】
2006071827.tif 000004
【図３】
2006071827.tif 000005
【図４】
2006071827.tif 000006
【図５】
2006071827.tif 000007
【図６】
2006071827.tif 000008
【図７】
2006071827.tif 000009
【図８】
2006071827.tif 000010
【図９】
2006071827.tif 000011
【図１０】
2006071827.tif 000012