(57)【要約】【課題】個人の文字の特徴を表した手書き文字をデジタル画像に簡便に挿入できる画像処理装置及び画像処理プログラムを提供する。【解決手段】画像処理装置は、所定のマーカＭが印字され、文字が手書きされた紙Ｐを撮影した撮影画像を取得する画像取得部と、前記撮影画像から手書き部分を切り抜いてデジタルスタンプを作成する切り抜き部と、第１画像を記憶する記憶部と、前記第１画像と前記デジタルスタンプとを合成し、第２画像を生成する合成部と、を備える。【選択図】図１
2019180023.tif 000002
【特許請求の範囲】
【請求項１】
所定のマーカが印字され、文字が手書きされた紙を撮影した撮影画像を取得する画像取得部と、
前記撮影画像から手書き部分を切り抜いてデジタルスタンプを作成する切り抜き部と、
第１画像を記憶する記憶部と、
前記第１画像と前記デジタルスタンプとを合成し、第２画像を生成する合成部と、
を備える画像処理装置。
【請求項２】
前記記憶部は、画像挿入領域及びスタンプ挿入領域が定義されたレイアウトデータを記憶しており、
前記合成部は、前記レイアウトデータを用いて、前記画像挿入領域に前記第１画像を挿入し、前記スタンプ挿入領域に前記デジタルスタンプを挿入して前記第２画像を生成することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記レイアウトデータは複数のスタンプ挿入領域を有し、
前記画像取得部は、複数枚の前記紙を撮影した複数の撮影画像を取得し、
前記切り抜き部は、前記複数の撮影画像から複数のデジタルスタンプを作成し、
前記合成部は、前記複数のデジタルスタンプを前記複数のスタンプ挿入領域に挿入することを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記複数のスタンプ挿入領域は放射状に配置されていることを特徴とする請求項３に記載の画像処理装置。
【請求項５】
前記複数枚の紙には異なる種類のマーカが印字されており、
前記スタンプ挿入領域にはマーカ種類が対応付けられており、
前記切り抜き部は、前記デジタルスタンプを作成すると共に、前記撮影画像からマーカ種類を抽出し、
前記合成部は、前記デジタルスタンプを、マーカ種類が対応するスタンプ挿入領域に挿入することを特徴とする請求項３又は４に記載の画像処理装置。
【請求項６】
前記紙を撮影し、前記撮影画像を生成するカメラをさらに備えることを特徴とする請求項１乃至５のいずれかに記載の画像処理装置。
【請求項７】
所定のマーカが印字され、文字が手書きされた紙を撮影した撮影画像を取得するステップと、
前記撮影画像から手書き部分を切り抜いてデジタルスタンプを作成するステップと、
記憶部に記憶されている第１画像と前記デジタルスタンプとを合成し、第２画像を生成するステップと、
をコンピュータに実行させることを特徴とする画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及び画像処理プログラムに関する。
【背景技術】
【０００２】
従来、デジタル画像に手書き文字を入力する場合、マウスやトラックパッドを用いてマウスポインタを動かしたり、指やスタイラスペン（タッチペン）を用いてタッチパネルから入力したりしていた。
【０００３】
しかし、このような手法では文字をうまく書けず、普段とは異なる文字になり、個人の文字の特徴を表すことができなかった。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第５２７００１８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、上記従来の実状に鑑みてなされたものであり、個人の文字の特徴を表した手書き文字をデジタル画像に簡便に挿入できる画像処理装置及び画像処理プログラムを提供することを課題とする。
【課題を解決するための手段】
【０００６】
本発明の画像処理装置は、所定のマーカが印字され、文字が手書きされた紙を撮影した撮影画像を取得する画像取得部と、前記撮影画像から手書き部分を切り抜いてデジタルスタンプを作成する切り抜き部と、第１画像を記憶する記憶部と、前記第１画像と前記デジタルスタンプとを合成し、第２画像を生成する合成部と、
を備えるものである。
【０００７】
本発明の一態様において、前記記憶部は、画像挿入領域及びスタンプ挿入領域が定義されたレイアウトデータを記憶しており、前記合成部は、前記レイアウトデータを用いて、前記画像挿入領域に前記第１画像を挿入し、前記スタンプ挿入領域に前記デジタルスタンプを挿入して前記第２画像を生成する。
【０００８】
本発明の一態様において、前記レイアウトデータは複数のスタンプ挿入領域を有し、前記画像取得部は、複数枚の前記紙を撮影した複数の撮影画像を取得し、前記切り抜き部は、前記複数の撮影画像から複数のデジタルスタンプを作成し、前記合成部は、前記複数のデジタルスタンプを前記複数のスタンプ挿入領域に挿入する。
【０００９】
本発明の一態様において、前記複数のスタンプ挿入領域は放射状に配置されている。
【００１０】
本発明の一態様において、前記複数枚の紙には異なる種類のマーカが印字されており、前記スタンプ挿入領域にはマーカ種類が対応付けられており、前記切り抜き部は、前記デジタルスタンプを作成すると共に、前記撮影画像からマーカ種類を抽出し、前記合成部は、前記デジタルスタンプを、マーカ種類が対応するスタンプ挿入領域に挿入する。
【００１１】
本発明の一態様では、前記紙を撮影し、前記撮影画像を生成するカメラをさらに備える。
【００１２】
本発明の画像処理プログラムは、所定のマーカが印字され、文字が手書きされた紙を撮影した撮影画像を取得するステップと、前記撮影画像から手書き部分を切り抜いてデジタルスタンプを作成するステップと、記憶部に記憶されている第１画像と前記デジタルスタンプとを合成し、第２画像を生成するステップと、をコンピュータに実行させるものである。
【発明の効果】
【００１３】
本発明によれば、個人の文字の特徴を表した手書き文字をデジタル画像に簡便に挿入できる。
【図面の簡単な説明】
【００１４】
【図１】（ａ）〜（ｄ）は本発明の実施形態に係る画像処理の一例を示す図である。
【図２】（ａ）〜（ｄ）は同実施形態に係る画像処理の一例を示す図である。
【図３】（ａ）（ｂ）は同実施形態に係る画像処理の一例を示す図である。
【図４】レイアウトの一例を示す図である。
【図５】画像処理装置の概略構成図である。
【図６】画像処理プログラムを実行することで実現される機能ブロック図である。
【図７】画像処理方法を説明するフローチャートである。
【図８】手書き文字の切り抜き処理を説明する図である。
【図９】別の実施形態に係る画像処理装置の概略図である。
【発明を実施するための形態】
【００１５】
以下、本発明の実施の形態を図面に基づいて説明する。本実施形態に係る画像処理の流れを図１（ａ）〜（ｄ）に示す。本実施形態に係る画像処理システムは、端末１と、マーカＭが印字された専用紙Ｐとを用いるものであり、まず、図１（ａ）に示すように、ユーザがペンや鉛筆等により専用紙Ｐに文字を手書きする。文字だけでなく、イラスト等を手書きしてもよい。専用紙Ｐの材料は特に限定されない。
【００１６】
続いて、図１（ｂ）に示すように、端末１のカメラ機能を用いて、文字を書いた専用紙Ｐを撮影する。端末１は、例えば、デジタルカメラを内蔵したスマートフォンやタブレット端末である。
【００１７】
端末１は、撮影画像から手書き文字部分を切り抜き、図１（ｃ）に示すようなデジタルスタンプ（以下、スタンプということがある）ＳＴを生成する。端末１は、撮影画像内のマーカＭを基準に、手書き文字部分のサイズや角度等の付帯情報を抽出してもよい。
【００１８】
図１（ｄ）に示すように、端末１に保存されている画像Ｇ１の所望の位置に、デジタルスタンプＳＴを挿入する。これにより、デジタル画像に手書き文字を挿入できる。画像Ｇ１にデジタルスタンプＳＴを挿入した画像は、端末１のメモリに保存され、図示しないプリンタからプリント出力できる。
【００１９】
この手書き文字は、ペンや鉛筆等を用いて専用紙Ｐに書いたものであるため、タッチパネルから入力したり、マウスを使用したりする方法と比較して、上手く書くことができ、ユーザ個人の文字の特徴を表したものとなる。
【００２０】
端末１には、様々なレイアウトのデータが保存されており、レイアウトデータを利用することで、例えば、複数の手書き文字スタンプを放射状に配置した寄せ書きのような画像を作成することができる。例えば、図２（ａ）に示すように、複数の人に専用紙Ｐを配布し、文字を書いてもらう。
【００２１】
端末１において、図２（ｂ）に示すような、画像挿入領域を中心に複数のスタンプ挿入領域Ｃが放射状に配置された寄せ書き用のレイアウトＬ１を選択する。
【００２２】
図２（ｃ）に示すように、文字が書かれた専用紙Ｐを回収し、端末１のカメラ機能を用いて、各専用紙Ｐを順に撮影する。端末１は、撮影画像から手書き文字部分を切り抜き、デジタルスタンプを生成する。デジタルスタンプの生成は、複数（全て）の専用紙Ｐを撮影した後に行ってもよいし、撮影の都度行ってもよい。
【００２３】
端末１は、メモリ内に保存している画像の中から、ユーザが選択した画像を、レイアウトＬ１の画像挿入領域に配置する。また、生成したデジタルスタンプをスタンプ挿入領域Ｃに配置する。例えば、デジタルスタンプは、生成順（専用紙Ｐの撮影順）に、１２時の位置から時計回りに配置される。これにより、図２（ｄ）に示すような、ユーザが選択した画像Ｇ２を中心に、手書き文字のコメントが放射状に配置された寄せ書き風の画像Ｇ３が作成される。デジタルスタンプの位置は、編集操作により変更・入れ替えが可能となっている。
【００２４】
印字されているマーカＭが異なる複数種類の専用紙Ｐと、マーカＭ毎のスタンプ配置位置が予め決められているレイアウトを準備してもよい。例えば、端末１は、図３（ａ）に示すような、画像挿入領域の上下左右にスタンプ挿入領域Ｒ１〜Ｒ４が設けられたレイアウトＬ２のデータを有する。
【００２５】
図３（ｂ）に示すようなマーカの異なる専用紙Ｐ１〜Ｐ４が配布される。専用紙Ｐ１に書かれた文字から生成されるデジタルスタンプは、レイアウトＬ２のスタンプ挿入領域Ｒ１に挿入される。専用紙Ｐ２に書かれた文字から生成されるデジタルスタンプは、スタンプ挿入領域Ｒ２に挿入される。専用紙Ｐ３に書かれた文字から生成されるデジタルスタンプは、スタンプ挿入領域Ｒ３に挿入される。専用紙Ｐ４に書かれた文字から生成されるデジタルスタンプは、スタンプ挿入領域Ｒ４に挿入される。
【００２６】
スタンプ挿入領域は、画像挿入領域の外側にあってもよいし、画像挿入領域に重なっていてもよい。図４に示すレイアウトＬ３は、画像挿入領域上に複数のスタンプ領域が放射状に配置されるレイアウトの例であり、専用紙Ｐのマーカ種毎に、大まかなスタンプ配置位置が予め決められているものである。
【００２７】
例えば、星マークのマーカが印字された専用紙Ｐ１（図３（ｂ）参照）に書かれた文字から生成されるデジタルスタンプは、レイアウトＬ３の上部のスタンプ挿入領域のいずれかに配置される。
【００２８】
次に、端末１の構成について説明する。図５は、本実施形態に係る画像処理装置としての端末１のブロック構成図である。端末１は、ＣＰＵ（Central  Processing  Unit）１０、メモリ１１、カメラ１２、通信部１３、ディスプレイ（タッチパネル）１４等を備える。
【００２９】
メモリ１１は、手書き文字挿入アプリ（画像処理プログラム）、レイアウトデータ、画像データ等を記憶する。例えば、手書き文字挿入アプリ及びレイアウトデータは、通信部１３を介してサーバ（図示略）からダウンロードされたものである。レイアウトデータは、画像挿入領域及びスタンプ挿入領域の大きさや位置が定義された複数のレイアウトについてのデータである。レイアウトデータは、専用紙に印字されているマーカＭの種類や大きさの情報を含む。画像データは、例えば、カメラ１２を用いて人物や風景を撮影した撮影画像のデータである。
【００３０】
メモリ１１は、フラッシュメモリタイプ、ハードディスクタイプ、マルチメディアカードマイクロタイプ、カードタイプのメモリ（例えば、ＳＤ又はＸＤメモリなど）、ＲＡＭ、ＳＲＡＭ、ＲＯＭ、ＥＥＰＲＯＭ、ＰＲＯＭ、磁気メモリの少なくとも１つのタイプの記憶媒体を含む。
【００３１】
ＣＰＵ１０が手書き文字挿入アプリを実行することで、図６に示すように、画像選択部１０２、レイアウト選択部１０４、手書き文字画像取得部１０６、手書き文字切り抜き部１０８、合成部１１０、編集部１１２及び画像出力部１１４の機能が実現される。各部の処理を、図７に示すフローチャートに沿って説明する。
【００３２】
画像選択部１０２が、手書き文字スタンプを挿入する画像の選択を受け付ける（ステップＳ１）。例えば、画像選択部１０２は、メモリ１１に保存されている画像データの一覧画面をディスプレイ１４に表示し、ユーザから画像の選択を受け付ける。
【００３３】
レイアウト選択部１０４が、手書き文字スタンプの配置レイアウトの選択を受け付ける（ステップＳ２）。例えば、レイアウト選択部１０４は、メモリ１１に保存されているレイアウトデータを用いて、レイアウトの一覧画面をディスプレイ１４に表示し、ユーザからレイアウトの選択を受け付ける。
【００３４】
カメラ１２を用いて専用紙Ｐを撮影する（ステップＳ３）。手書き文字画像取得部１０６は、手書き文字を含む画像を取得する。取得された画像データはメモリ１１に一時的に保存される。
【００３５】
手書き文字切り抜き部１０８が、手書き文字画像取得部１０６が取得した専用紙Ｐの撮影画像から、手書き部分を切り抜く（ステップＳ４）。マーカ部分は切り抜かれない。ここで、手書き部分は、文字に限定されず、イラスト等も含む。例えば、手書き文字切り抜き部１０８は、撮影画像内の専用紙領域と、専用紙の基準画像（文字を書き込む前の専用紙の画像）とを比較し、異なる部分（変化があった部分）を手書き部分とみなして切り抜く。
【００３６】
手書き文字切り抜き部１０８は、切り抜いた手書き部分をデジタル画像化し、デジタルスタンプを生成する。
【００３７】
マーカＭのサイズや位置は予め決まっている。そのため、手書き文字切り抜き部１０８は、撮影画像内のマーカ部分のサイズや位置を基準に、手書き部分のサイズや角度等の付帯情報を抽出してもよい。例えば、図８に示すように、手書き文字部分の長さＤ１、高さＤ２、角度θ等を付帯情報として抽出する。また、マーカＭの種類（星、二重丸、三角など）も付帯情報として抽出する。付帯情報は、生成されたスタンプに紐付けてメモリ１１に保存される。
【００３８】
合成部１１０が、選択されたレイアウトのスタンプ挿入領域に、手書き文字切り抜き部１０８が生成したデジタルスタンプを挿入・合成する（ステップＳ５）。ユーザがレイアウトとして「ユーザ指定の位置に挿入」を選択している場合は、図１（ｄ）に示すように、画像内のユーザ指定の位置にデジタルスタンプを挿入・合成する。また、合成部１１０は、選択されたレイアウトの画像挿入領域に、ステップＳ１で選択された画像を挿入・配置する。
【００３９】
スタンプ挿入領域にマーカ種が設定されている場合、合成部１１０は、各デジタルスタンプの付帯情報のマーカ種類に基づいて、スタンプ挿入領域を決定する。
【００４０】
合成部１１０は、付帯情報に含まれる角度情報に基づいて、スタンプ挿入時に角度補正を行ってもよい。例えば、スタンプ挿入領域が放射状に配置されている場合は、各デジタルスタンプの角度を調整して、放射状に配置する。
【００４１】
また、画像のプリントサイズが予め決まっている場合は、プリント物における手書き文字サイズが、専用紙Ｐに手書きした文字サイズと同じになるように、付帯情報の文字サイズに基づいて、合成するスタンプサイズを調整してもよい。
【００４２】
編集部１１２が、ユーザからの指示に基づいて、レイアウト内に挿入されたデジタルスタンプの大きさや位置の変更等の編集処理を行う（ステップＳ６）。
【００４３】
画像出力部１１４は、手書き文字スタンプが合成された画像を出力し、メモリ１１に保存する。
【００４４】
このように、本実施形態によれば、個人の文字の特徴を表した手書き文字をデジタル画像に簡便に合成できる。また、専用紙Ｐを複数人に配布して文字を書かせることで、複数人の手書き文字のデジタルスタンプを作成できる。これらのスタンプを、図２（ｄ）に示すレイアウトＬ１や図４に示すレイアウトＬ３に配置することで、寄せ書き風の画像を容易に作成できる。
【００４５】
上記実施形態において、専用紙ＰのマーカＭは星や三角のような図形でなくてもよく、例えば文字列やイラストであってもよい。メモリ１１には、マーカＭの外観、サイズ、位置等の情報が予め格納される。
【００４６】
手書き文字スタンプを画像上に合成する場合、画像の色に応じて手書き文字スタンプの色を変えてもよい。例えば、画像の黒色部分の上に、黒色の手書き文字スタンプを合成した場合、手書き文字が読み難くなる。手書き文字スタンプの色と、スタンプが配置される部分の画像の色とが同じ（近い）場合、手書き文字スタンプの色を変えることで、手書き文字が読みやすくなる。例えば、スタンプが配置される部分の画像の色の補色に文字色を変える。
【００４７】
上記実施形態では、スマートフォンやタブレット端末等の端末１を用いて、専用紙Ｐの撮影、手書き文字スタンプの生成、及び画像とスタンプの合成を行う例について説明したが、図９に示すように、専用紙Ｐの撮影を行う撮影装置２と、手書き文字スタンプの生成及び画像とスタンプの合成を行う機器３（例えばパーソナルコンピュータ）とが異なるものであってもよい。
【００４８】
レイアウトデータには、１又は複数のスタンプ挿入領域の位置が予め定義されているが、ユーザが、手書き文字スタンプを挿入する画像において、スタンプを配置したくない領域を指定すると、端末１（機器３）は、指定された領域を避けて、スタンプ挿入領域の位置を変更するようにしてもよい。例えば、画像内の顔部分を指定すると、顔部分を避けて、スタンプ挿入領域が配置される。画像に挿入されたデジタルスタンプにより、顔が隠れないようにすることができる。
【００４９】
なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【符号の説明】
【００５０】
１  端末
１０  ＣＰＵ
１１  メモリ
１２  カメラ
１３  通信部
１４  ディスプレイ
Ｐ  専用紙
Ｍ  マーカ
【図１】
2019180023.tif 000003
【図２】
2019180023.tif 000004
【図３】
2019180023.tif 000005
【図４】
2019180023.tif 000006
【図５】
2019180023.tif 000007
【図６】
2019180023.tif 000008
【図７】
2019180023.tif 000009
【図８】
2019180023.tif 000010
【図９】
2019180023.tif 000011