(57)【要約】【課題】画像から不定期変化領域を抽出することを可能とする。【解決手段】画像比較部３２は、画像格納部２２に格納されている画像の各々を比較する。画像比較部３２は、比較結果に基づいて、画像格納部２２に格納されている複数の画像において変化のある変化領域を算出する。画像比較部３２は、画像格納部２２に格納されている画像における変化領域を示す座標を、当該画像格納部２２に格納する。画像比較部３２は、画像格納部２２に格納された座標によって示される変化領域に一致する変化領域画像を、画像格納部２２に格納されている画像の各々から取得する。画像比較部３２は、取得された変化領域画像を比較し、画像格納部２２に格納された座標によって示される変化領域が不定期に変化する領域であるか否かを判定する。表示部３３は、画像比較部３２による判定結果及び画像格納部２２に格納された座標をユーザに提示する。【選択図】図４
2011135222.tif 000002
【特許請求の範囲】
【請求項１】
定期的に採取された複数の画像を格納する画像格納手段を備える画像解析装置において、
前記画像格納手段に格納されている画像の各々を比較する比較手段と、
前記比較結果に基づいて、前記画像格納手段に格納されている複数の画像において変化のある変化領域を算出する算出手段と、
前記画像格納手段に格納されている画像における前記算出された変化領域を示す座標を、前記画像格納手段に格納する格納処理手段と、
前記画像格納手段に格納された座標によって示される変化領域に一致する変化領域画像を、前記画像格納手段に格納されている画像の各々から取得する変化領域画像取得手段と、
前記取得された変化領域画像を比較し、前記画像格納手段に格納された座標によって示される変化領域が定期的に変化する時計表示領域であるか不定期に変化する領域であるかを判定する判定手段と、
前記変化領域が不定期に変化する領域であると判定された場合、当該判定結果及び前記画像格納手段に格納された座標を提示する提示手段と
を具備することを特徴とする画像解析装置。
【請求項２】
前記提示手段は、前記変化領域が定期的に変化する時計表示領域であると判定された場合、当該判定結果及び前記画像格納手段に格納された座標を提示することを特徴とする請求項１記載の画像解析装置。
【請求項３】
前記変化領域が不定期に変化する領域であると判定された場合、当該変化領域を画像における変化の監視領域として設定する設定手段を更に具備することを特徴とする請求項１記載の画像解析装置。
【請求項４】
定期的に採取された複数の画像であって、文字列が表示される複数の画像を格納する画像格納手段を備える画像解析装置において、
前記画像格納手段に格納されている画像の各々から当該画像に表示される文字列を抽出する文字認識処理手段と、
前記抽出された文字列及び前記画像格納手段に格納されている画像において当該文字列に該当する領域を示す座標を格納する文字列格納手段と、
前記文字列格納手段に格納された文字列を比較する比較手段と、
前記比較結果に基づいて、前記文字列格納手段に格納された文字列が定期的に変化する時計表示に該当する文字列か不定期に変化する不定期変化文字列かを判定する判定手段と、
前記文字列が不定期変化文字列と判定された場合、当該判定結果及び前記文字列格納手段に格納された座標を提示する提示手段と
を具備することを特徴とする画像解析装置。
【請求項５】
定期的に採取された複数の画像を格納する画像格納手段及び表示装置を備える画像解析装置のコンピュータによって実行されるプログラムであって、
前記コンピュータに、
前記画像格納手段に格納されている画像の各々を比較するステップと、
前記比較結果に基づいて、前記画像格納手段に格納されている複数の画像において変化のある変化領域を算出するステップと、
前記画像格納手段に格納されている画像における前記算出された変化領域を示す座標を、前記画像格納手段に格納するステップと、
前記画像格納手段に格納された座標によって示される変化領域に一致する変化領域画像を、前記画像格納手段に格納されている画像の各々から取得するステップと、
前記取得された変化領域画像を比較し、前記画像格納手段に格納された座標によって示される変化領域が定期的に変化する時計表示領域であるか不定期に変化する領域であるかを判定する判定手段と、
前記変化領域が不定期に変化する領域であると判定された場合、当該判定結果及び前記画像格納手段に格納された座標を前記表示装置に表示させるステップと
を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像から不定期変化領域を抽出する画像解析装置及びプログラムに関する。
【背景技術】
【０００２】
文字列またはグラフィックからなるコンピュータ等の画面上（以下、単に画面上と表記）に例えばメッセージが表示される領域が存在する場合、当該メッセージの内容が変化した際に当該メッセージの領域全体を画像データとして切り出したい場合がある。
【０００３】
例えば複数のビルを監視するようなシステム（以下、ビル監視システムと表記）を想定する。このビル監視システムにおいては、例えば複数のビルの各々の監視に関するメッセージ（例えば、「非常ドアが開いています」等）が画面上に表示された場合に、当該メッセージの領域（メッセージが表示される領域）を画像データとして切り出す（抽出する）ことで、ビルの監視の効率を向上させることが期待できる。
【０００４】
このような場合、例えば画面上に表示される画像を比較することにより、当該画面上に表示される画像において変化のある領域を特定し、当該領域に一致する画像データが抽出される。
【０００５】
しかしながら、一般的に、画面上には例えば時計が表示される領域が存在する。このような場合、画面上（に表示される画像中）で変化する領域には、時計のように定期的に変化する領域（以下、定期変化領域と表記）と上記したメッセージのように不定期に変化する領域（以下、不定期変化領域と表記）とが含まれる。したがって、上記したようにメッセージの領域（不定期変化領域）を抽出するためには、定期的な時計の表示更新による画像の変化（つまり、定期変化領域の変化）とメッセージの変化による画像の変化（つまり、不定期変化領域の変化）とを区別し、当該不定期変化領域の変化のみを検出する必要がある。
【０００６】
ここで、例えば画像中から動領域を正確に検出できる技術（以下、先行技術と表記）が開示されている（例えば、特許文献１を参照）。この先行技術によれば、フィールド画像間またはフレーム画像間の輝度信号変化より求めた動き係数信号を周辺画素あるいは周辺ブロックの動き係数信号との平均または加重平均して、言い換えるとローパスフィルタにかけて正しく補正し、その補正された信号を新たに動き係数信号として動領域の検出が行われる。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開平６−２０９４５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
上記したように不定期変化領域を抽出するためには、例えばコンピュータを利用する人間（ユーザ）が画面上に表示される画像（領域）を一定期間目視により確認することで、当該画像領域内でメッセージの変化を注目すべき不定期変化領域を特定する必要がある。特に、コンピュータ等の画面仕様が明らかでない場合には、目視による確認に頼らざるを得ない。
【０００９】
つまり、例えばメッセージが表示される領域（不定期変化領域）を監視する必要があり、時計が表示される領域である時計表示領域（定期変化領域）を監視する必要がない場合には、不定期変化領域と定期変化領域との区別を目視で行う必要があるため労力を伴う。
【００１０】
また、上記した先行技術によれば、画像中から動領域を検出できるが、当該動領域が定期変化領域であるか不定期変化領域であるかについては考慮されていない。
【００１１】
そこで、本発明の目的は、画像から不定期変化領域を抽出することが可能な画像解析装置及びプログラムを提供することにある。
【課題を解決するための手段】
【００１２】
本発明の１つの態様によれば、定期的に採取された複数の画像を格納する画像格納手段を備える画像解析装置が提供される。この画像解析装置は、前記画像格納手段に格納されている画像の各々を比較する比較手段と、前記比較結果に基づいて、前記画像格納手段に格納されている複数の画像において変化のある変化領域を算出する算出手段と、前記画像格納手段に格納されている画像における前記算出された変化領域を示す座標を、前記画像格納手段に格納する格納処理手段と、前記画像格納手段に格納された座標によって示される変化領域に一致する変化領域画像を、前記画像格納手段に格納されている画像の各々から取得する変化領域画像取得手段と、前記取得された変化領域画像を比較し、前記画像格納手段に格納された座標によって示される変化領域が定期的に変化する時計表示領域であるか不定期に変化する領域であるかを判定する判定手段と、前記変化領域が不定期に変化する領域であると判定された場合、当該判定結果及び前記画像格納手段に格納された座標を提示する提示手段とを具備する。
【発明の効果】
【００１３】
本発明は、画像から不定期変化領域を抽出することを可能とする。
【図面の簡単な説明】
【００１４】
【図１】本発明の第１の実施形態に係る画像解析装置のハードウェア構成を示すブロック図。
【図２】本実施形態に係る画像解析装置３０が適用される一例について説明するための図。
【図３】端末５０の画面上に表示される画像の一例を示す図。
【図４】図１に示す画像解析装置３０の主として機能構成を示すブロック図。
【図５】本実施形態に係る画像解析装置３０の処理手順を示すフローチャート。
【図６】画像採取処理の処理手順を示すフローチャート。
【図７】矩形解析処理の処理手順を示すフローチャート。
【図８】矩形解析処理における変化領域の算出について具体的に説明するための図。
【図９】対象変化領域が時計表示における秒の１の桁に該当する領域であるか否かを判定する第１の判定処理の処理手順を示すフローチャート。
【図１０】対象変化領域が時計表示における秒の１０の桁に該当する領域であるか否かを判定する第２の判定処理の処理手順を示すフローチャート。
【図１１】対象変化領域が時計表示における分の１の桁に該当する領域であるか否かを判定する第３の判定処理の処理手順を示すフローチャート。
【図１２】対象変化領域が時計表示における分の１０の桁に該当する領域であるか否かを判定する第４の判定処理の処理手順を示すフローチャート。
【図１３】対象変化領域が時計表示における時の１の桁に該当する領域であるか否かを判定する第５の判定処理の処理手順を示すフローチャート。
【図１４】対象変化領域が時計表示における時の１０の桁に該当する領域であるか否かを判定する第６の判定処理の処理手順を示すフローチャート。
【図１５】本発明の第２の実施形態に係る画像解析装置の主として機能構成を示すブロック図。
【図１６】端末５０の画面上に表示される画像の一例を示す図。
【発明を実施するための形態】
【００１５】
以下、図面を参照して、本発明の各実施形態について説明する。
【００１６】
［第１の実施形態］
図１は、本発明の第１の実施形態に係る画像解析装置のハードウェア構成を示すブロック図である。図１に示すように、コンピュータ１０は、例えばハードディスクドライブ（ＨＤＤ：Hard Disk Drive）のような外部記憶装置２０と接続されている。この外部記憶装置２０は、コンピュータ１０によって実行されるプログラム２１を格納する。コンピュータ１０及び外部記憶装置２０は、画像解析装置３０を構成する。
【００１７】
本実施形態に係る画像解析装置３０は、画像において不定期に変化する領域（以下、不定期変化領域と表記）または時計が表示される領域等の定期的に変化する領域（以下、定期変化領域と表記）を抽出する機能を有する。
【００１８】
ここで、図２を参照して、本実施形態に係る画像解析装置３０が適用される一例について説明する。ここでは、図２に示すような例えば複数のビルの各々に設けられた端末５０の各々と当該端末５０の各々を一括して監視することにより、当該複数のビルを監視する監視装置６０を備えるビル監視システムを想定する。
【００１９】
このビル監視システムにおいては、端末５０が設けられているビルの監視に関するメッセージ（例えば、「非常ドアが開いています」等）が当該端末５０の画面上に表示される。つまり、端末５０の画面上においては、表示されるメッセージの更新等によって画像が変化する。
【００２０】
このように端末５０の画面上に表示されるメッセージの内容が変化した場合には、当該変化した領域が画像（データ）として抽出され、当該画像が監視装置６０に送信される。これにより、監視装置６０においては、各端末５０の画面上に表示されるメッセージの内容の変化を監視することができる。なお、メッセージ内容の変化は、例えば端末５０の画面上に表示される前後の画像を比較することによって抽出される。
【００２１】
ところで、ビルの各々に設けられた端末５０の画面上に表示される画像には例えば時計が表示される領域が存在する。つまり、端末５０の画面上に表示される画像には、図３に示すようにメッセージが表示される領域５１及び時計が表示される領域が含まれる。また、図３に示す例では、時計が表示される領域には、時計表示における時の１０の桁に該当する領域５２、時の１の桁に該当する領域５３、分の１０の桁に該当する領域５４及び分の１の桁に該当する領域５５が含まれている。
【００２２】
このため、メッセージの内容が変化した領域を抽出するためには、当該メッセージの内容の変化による画像の変化と時計の表示更新による画像の変化を区別する必要がある。
【００２３】
本実施形態に係る画像解析装置３０は、上記したようなビル監視システム等に適用されることにより、例えば端末５０の画面上に表示される画像において不定期に変化（更新）するメッセージ等が表示される領域（不定期変化領域）または定期的に変化（更新）する時計が表示される領域（定期変化領域）を自動的に抽出することができる。
【００２４】
上記した図３に示す例では、端末５０の画面上において時計が表示される領域には、上記した分の１の桁、分の１０の桁、時の１の桁及び時の１０の桁（に該当する領域）が含まれるものとして説明したが、以下の説明においては、これらに加えて、秒の１の桁及び秒の１０の桁（に該当する領域）が含まれるものとする。
【００２５】
図４は、図１に示す画像解析装置３０の主として機能構成を示すブロック図である。画像解析装置３０は、例えば図２に示す端末５０と接続される。
【００２６】
図４に示すように、画像解析装置３０は、画像取得部３１、画像比較部３２及び表示部３３を含む。本実施形態において、これらの各部３１乃至３３は、図１に示すコンピュータ１０が外部記憶装置２０に格納されているプログラム２１を実行することにより実現されるものとする。このプログラム２１は、コンピュータ読み取り可能な記憶媒体に予め格納して頒布可能である。また、このプログラム２１が例えばネットワークを介してコンピュータ１０にダウンロードされても構わない。
【００２７】
また、画像解析装置３０は、画像格納部２２を有する。本実施形態において、画像格納部２２は、例えば外部記憶装置２０に格納される。
【００２８】
画像取得部３１は、図２に示すビル監視システムにおける端末５０の画面上に表示される画像のうち、予め設定された領域の画像を例えば１秒毎（定期的）に取得（採取）する。画像取得部３１は、例えば１日分（つまり、２４時間分）の画像を取得する。なお、予め設定された領域には、例えば上記した図３に示すように時計が表示される領域（定期変化領域）とメッセージ等が表示される領域（不定期変化領域）が含まれるものとする。
【００２９】
画像取得部３１によって取得された画像は、当該画像が取得された日時（を示す日時情報）と共に画像格納部２２に格納される。
【００３０】
画像取得部３１は、取得された画像の各々を比較する。具体的には、画像取得部３１は、取得された画像及び当該画像の前の画像（１秒前に取得された画像）を比較する。画像取得部３１は、取得された画像が前の画像と異なる場合、当該異なる部分を含む最小の矩形（領域）を示す座標（矩形情報）を比較結果として取得する。画像取得部３１によって取得された矩形情報は、画像が取得された日時（を示す日時情報）と共に画像格納部２２に格納される。
【００３１】
画像比較部３２は、画像格納部２２に格納された矩形情報に基づいて、当該画像格納部２２に格納されている画像において変化のある領域（以下、変化領域と表記）を算出する。画像比較部３２によって算出された変化領域を示す座標は、画像格納部２２に格納される。
【００３２】
画像比較部３２は、画像格納部２２に格納された座標によって示される変化領域が不定期変化領域（例えばメッセージ等が表示される領域）であるか定期変化領域（例えば時計が表示される領域）であるかを判定する。
【００３３】
画像比較部３２は、画像格納部２２に格納された座標によって示される変化領域に一致する画像（以下、変化領域画像と表記）を、当該画像格納部２２に格納されている画像の各々から取得する。画像比較部３２は、取得された変化領域画像を比較することによって判定処理を実行する。
【００３４】
表示部３３は、画像比較部３２による判定結果をユーザに対して提示する。この場合、表示部３３は、変化領域が不定期変化領域であるか定期変化領域であるかの判定結果及び画像格納部２２に格納された座標（当該変化領域を示す座標）を例えば表示装置（図示せず）に表示する。
【００３５】
次に、図５のフローチャートを参照して、本実施形態に係る画像解析装置３０の処理手順について説明する。
【００３６】
まず、画像取得部３１は、上記した例えば端末５０の画面上に表示される画像を取得（採取）する処理（以下、画像採取処理と表記）を実行する（ステップＳ１）。画像採取処理においては、端末５０の画面上に表示される画像が１秒毎に１日分取得される。この画像採取処理において取得された画像は、当該画像が取得された日時を示す日時情報と共に画像格納部２２に格納される。また、画像採取処理においては、取得された画像と当該画像の前に取得された画像（１秒前に取得された画像）とが比較されることにより、当該画像において異なる部分を含む最小の矩形（領域）を示す矩形情報（座標）が当該比較結果として取得される。画像採取処理において取得された矩形情報は、画像が取得された日時を示す日時情報と共に画像格納部２２に格納される。なお、画像採取処理の詳細については後述する。
【００３７】
次に、画像比較部３２は、画像格納部２２に格納された矩形情報に基づいて、矩形解析処理を実行する（ステップＳ２）。画像比較部３２は、矩形解析処理により、画像格納部２２に格納された画像において変化のある領域を囲むのに十分な最小の矩形領域である変化領域を算出する。矩形解析処理において算出された変化領域には、上記したメッセージ等が表示される不定期変化領域及び時計が表示される定期変化領域が含まれる。矩形解析処理において算出された変化領域を示す座標（座標情報）は、画像格納部２２に格納される。なお、矩形解析処理の詳細については後述する。
【００３８】
画像比較部３２は、画像格納部２２に格納された座標によって示される変化領域の各々に対してステップＳ３以降の処理を実行する。このステップＳ３以降の処理により、画像格納部２２に格納された座標によって示される変化領域が例えばメッセージ等が表示される不定期変化領域であるか時計が表示される定期変化領域であるかが判定される。
【００３９】
画像比較部３２は、第１の判定処理により、画像格納部２２に格納された座標によって示される変化領域が時計表示における秒の１の桁（に該当する領域）であるか否かを判定する処理（以下、第１の判定処理と表記）を実行する（ステップＳ３）。なお、第１の判定処理の詳細については後述する。
【００４０】
第１の判定処理において変化領域が時計表示における秒の１の桁でないと判定された場合（ステップＳ３のＮＯ）、画像比較部３２は、当該変化領域が時計表示における秒の１０の桁（に該当する領域）であるか否かを判定する処理（以下、第２の判定処理と表記）を実行する（ステップＳ４）。なお、第２の判定処理の詳細については後述する。
【００４１】
第２の判定処理において変化領域が時計表示における秒の１０の桁でないと判定された場合（ステップＳ４のＮＯ）、画像比較部３２は、当該変化領域が時計表示における分の１の桁（に該当する領域）であるか否かを判定する処理（以下、第３の判定処理と表記）を実行する（ステップＳ５）。なお、第３の判定処理の詳細については後述する。
【００４２】
第３の判定処理において変化領域が時計表示における分の１の桁でないと判定された場合（ステップＳ５のＮＯ）、画像比較部３２は、当該変化領域が時計表示における分の１０の桁（に該当する領域）であるか否かを判定する処理（以下、第４の判定処理と表記）を実行する（ステップＳ６）。なお、第４の判定処理の詳細については後述する。
【００４３】
第４の判定処理において変化領域が時計表示における分の１０の桁でないと判定された場合（ステップＳ６のＮＯ）、画像比較部３２は、当該変化領域が時計表示における時の１の桁（に該当する領域）であるか否かを判定する処理（以下、第５の判定処理）を実行する（ステップＳ７）。なお、第５の判定処理の詳細については後述する。
【００４４】
第５の判定処理において変化領域が時計表示における時の１の桁でないと判定された場合（ステップＳ７のＮＯ）、画像比較部３２は、当該変化領域が時計表示における時の１０の桁（に該当する領域）であるか否かを判定する処理（以下、第６の判定処理と表記）を実行する（ステップＳ８）。なお、第６の判定処理の詳細については後述する。
【００４５】
第６の判定処理において変化領域が時計表示における時の１０の桁でないと判定された場合（ステップＳ８のＮＯ）、画像比較部３２は、当該変化領域が不定期変化領域（メッセージ等が表示される不定期に変化する領域）であると判定する（ステップＳ９）。
【００４６】
一方、第１の判定処理において変化領域が時計表示における秒の１の桁であると判定された場合（ステップＳ３のＹＥＳ）、画像比較部３２は、当該変化領域が定期変化領域（時計が表示される定期的に変化する領域）であると判定する（ステップＳ１０）。
【００４７】
なお、第２の判定処理において変化領域が時計表示における秒の１０の桁であると判定された場合（ステップＳ４のＹＥＳ）、第３の判定処理において変化領域が時計表示における分の１の桁であると判定された場合（ステップＳ５のＹＥＳ）、第４の判定処理において変化領域が時計表示における分の１０の桁であると判定された場合（ステップＳ６のＹＥＳ）、第５の判定処理において変化領域が時計表示における時の１の桁であると判定された場合（ステップＳ７のＹＥＳ）、第６の判定処理において変化領域が時計表示における時の１０の桁であると判定された場合（ステップＳ８のＹＥＳ）についても同様に、ステップＳ１０の処理が実行される。
【００４８】
次に、画像比較部３２は、画像格納部２２に格納された座標によって示される変化領域の全てに対して上記したステップＳ３以降の処理が実行されたか否かを判定する（ステップＳ１１）。
【００４９】
変化領域の全てに対してステップＳ３以降の処理が実行されたと判定された場合、表示部３３は、ステップＳ９において不定期変化領域と判定された変化領域を示す座標及びステップＳ１０において定期変化領域と判定された変化領域を示す座標を表示装置に表示する。上記したように定期変化領域と判定された変化領域には、時計表示における秒の１の桁、秒の１０の桁、分の１の桁、分の１０の桁、時の１の桁及び時の１０の桁（に該当する領域）が含まれる。したがって、定期変化領域と判定された変化領域を示す座標が表示装置に表示される際には、当該変化領域の時計表示における桁の種類（秒の１０の桁等）も共に表示される。つまり、表示部３３は、どの領域（変化領域）が時計表示における時／分／秒（定期変化領域）で、どの領域が不定期変化領域であるかをユーザに対して提示する。この場合、表示部３３は、変化領域以外の領域（つまり、不変化領域）を示す座標も合わせてユーザに対して提示しても構わない。
【００５０】
これにより、画像解析装置３０を利用するユーザは、例えば端末５０の画面上に表示される画像においてメッセージ等が表示される不定期変化領域（または時計が表示される定期変化領域）を特定することができる。なお、ユーザに対して提示された不定期変化領域（または定期変化領域）を示す座標は、例えば端末５０の画面上に表示される画像における監視領域を設定する際に用いることができる。
【００５１】
次に、図６のフローチャートを参照して、前述した画像採取処理（図５に示すステップＳ１の処理）の処理手順について説明する。
【００５２】
まず、画像取得部３１は、上記した端末５０の画面上に表示される画像を取得する（ステップＳ２１）。画像取得部３１は、端末５０の画面上に表示される画像のうち、予め設定された領域の画像を取得する。以下、ステップＳ２１において取得された画像を第１の画像と称する。
【００５３】
次に、画像取得部３１は、取得された第１の画像を、当該第１の画像が取得された日時を示す日時情報と共に画像格納部２２に格納する（ステップＳ２２）。
【００５４】
画像取得部３１は、１秒待機した後（ステップＳ２３）、上記したステップＳ２１と同様に端末５０の画面上に表示される画像を取得する（ステップＳ２４）。以下、ステップＳ２４において取得された画像を第２の画像と称する。
【００５５】
画像取得部３１は、ステップＳ２１において取得された第１の画像とステップＳ２４において取得された第２の画像とを比較する。
【００５６】
画像取得部３１は、比較結果に基づいて、第１の画像と第２の画像とが異なるか否かを判定する（ステップＳ２５）。
【００５７】
第１の画像と第２の画像とが異なると判定された場合（ステップＳ２５のＹＥＳ）、画像取得部３１は、当該第１の画像及び第２の画像において異なる部分を含む最小の矩形（領域）を示す座標を矩形情報として取得する（ステップＳ２６）。
【００５８】
画像取得部３１は、取得された矩形情報を、第２の画像が取得された日時を示す日時情報と共に画像格納部２２に格納する（ステップＳ２７）。
【００５９】
画像取得部３１は、第２の画像を、当該画像が取得された日時と共に画像格納部２２に格納する（ステップＳ２８）。
【００６０】
次に、画像取得部３１は、１日分の画像を取得されたか否かを判定する（ステップＳ２９）。
【００６１】
１日分の画像が取得されていないと判定された場合（ステップＳ２９のＮＯ）、ステップＳ２３に戻って処理が繰り返される。この場合、上記したステップＳ２５の処理においては、第２の画像と当該第２の画像の１秒後の画像（ステップＳ２９において１日分の画像が取得されていないと判定された後に実行されるステップＳ２４において取得された画像）とが異なるか否かが判定される。
【００６２】
一方、１日分の画像が取得されたと判定された場合（ステップＳ２９のＹＥＳ）、処理は終了される。
【００６３】
上記した画像採取処理が実行されることにより、画像格納部２２には１日分の画像及び上記した画像の比較結果において異なる部分を示す矩形情報（座標）が格納される。
【００６４】
次に、図７のフローチャートを参照して、前述した矩形解析処理（図５に示すステップＳ２の処理）の処理手順について説明する。この矩形解析処理においては、画像格納部２２に格納された画像において変化のある領域を囲むのに十分な最小の矩形領域である変化領域が算出される。
【００６５】
まず、画像比較部３２は、画像格納部２２に格納されている矩形情報（座標）を１つ取得する（ステップＳ３１）。
【００６６】
次に、画像比較部３２は、取得された矩形情報によって示される矩形領域と少なくとも一部が重複する矩形領域を示す矩形情報を、画像格納部２２から取得する（ステップＳ３２）。
【００６７】
画像比較部３２は、ステップＳ３１及びステップＳ３２において取得された矩形情報によって示される矩形領域を内包する最小の矩形領域（以下、第１の矩形領域と表記）を算出する（ステップＳ３３）。
【００６８】
画像比較部３２は、算出された第１の矩形領域と少なくとも一部が重複する矩形領域を示す矩形情報が画像格納部２２に存在するか否かを判定する（ステップＳ３４）。
【００６９】
矩形情報が存在すると判定された場合（ステップＳ３４のＹＥＳ）、画像比較部３２は、当該矩形情報を画像格納部２２から取得する（ステップＳ３５）。
【００７０】
画像比較部３２は、算出された第１の矩形領域及びステップＳ３５において取得された矩形情報によって示される矩形領域を内包する最小の矩形領域（以下、第２の矩形領域と表記）を算出する（ステップＳ３６）。
【００７１】
次に、画像比較部３２は、算出された第１及び第２の矩形領域が一致するか否かを判定する（ステップＳ３７）。
【００７２】
第１及び第２の矩形領域が一致すると判定された場合（ステップＳ３７のＹＥＳ）、画像比較部３２は、当該第２の矩形領域（または第１の矩形領域）を変化領域とする。画像比較部３２は、変化領域を示す座標（矩形情報）を画像格納部２２に格納する（ステップＳ３８）。
【００７３】
画像比較部３２は、画像格納部２２に未処理の矩形情報が存在するか否かを判定する（ステップＳ３９）。ここで、未処理の矩形情報とは、上記したステップＳ３１、ステップＳ３２及びステップＳ３５において取得されていない矩形情報である。
【００７４】
画像格納部２２に未処理の矩形情報が存在しないと判定された場合（ステップＳ３９のＮＯ）、矩形解析処理は終了される。
【００７５】
一方、画像格納部２２に未処理に矩形情報が存在すると判定された場合（ステップＳ３９のＹＥＳ）、上記したステップＳ３１に戻って処理が繰り返される。このステップＳ３１においては未処理の矩形情報が取得される。
【００７６】
また、ステップＳ３４において矩形情報が存在しないと判定された場合、ステップＳ３８の処理が実行される。この場合、ステップＳ３３において算出された第１の矩形領域を変化領域として、ステップＳ３８の処理が実行される。
【００７７】
また、ステップＳ３７において第１及び第２の矩形領域が一致しないと判定された場合、ステップＳ３４に戻って処理が繰り返される。この場合、第２の矩形領域を第１の矩形領域としてステップＳ３４の処理が実行される。
【００７８】
上記したように画像比較部３２によって矩形解析処理が実行されることにより、変化領域が算出される。この矩形解析処理において算出される変化領域は、画像格納部２２に格納されている画像において変化のある文字（数字）の各々に該当する領域である。
【００７９】
ここで、図８を参照して、上記した矩形解析処理における変化領域の算出について具体的に説明する。なお、図８に示す矩形領域１０１〜１０５は、画像格納部２２に格納されている矩形情報によって示される矩形領域であるものとして説明する。
【００８０】
まず、画像比較部３２によって画像格納部２２から取得された矩形情報によって示される矩形領域が矩形領域１０１であるものとする。
【００８１】
図８に示す例では、矩形領域１０１と少なくとも一部が重複する矩形領域は、矩形領域１０２、矩形領域１０３及び矩形領域１０４である。よって、画像比較部３２は、矩形領域１０２〜１０４を示す矩形情報を画像格納部２２から取得する。
【００８２】
次に、画像比較部３２は、矩形領域１０１〜１０４を内包する最小の矩形領域（第１の矩形領域）として矩形領域２０１を算出する。
【００８３】
ここで、画像比較部３２によって算出された矩形領域２０１と少なくとも一部が重複する矩形領域として矩形領域１０５が存在する。よって、画像比較部３２は、矩形領域１０５を示す矩形情報を画像格納部２２から取得する。
【００８４】
画像比較部３２は、算出された矩形領域２０１及び取得された矩形情報によって示される矩形領域１０５を内包する最小の矩形領域（第２の矩形領域）として矩形領域２０２を算出する。
【００８５】
ここで、第１の矩形領域として算出された矩形領域２０１と第２の矩形領域として算出された矩形領域２０２は一致しない。
【００８６】
また、第２の矩形領域として算出された矩形領域２０２と少なくとも一部が重複する矩形領域（を示す矩形情報）は、図８に示す例では画像格納部２２に存在しない。
【００８７】
したがって、図８に示す例では、矩形解析処理により矩形領域２０２が変化領域２０２として算出される。この場合、変化領域２０２を示す座標が画像格納部２２に格納される。
【００８８】
次に、図９〜図１４を参照して、前述した第１〜第６の判定処理の処理手順について説明する。この第１〜第６の判定処理は、画像格納部２２に格納された座標によって示される変化領域の各々に対して実行される。以下、第１〜第６の判定処理の対象となる変化領域を対象変化領域と称する。
【００８９】
まず、図９に示すフローチャートを参照して、前述した第１の判定処理の処理手順について説明する。第１の判定処理は、対象変化領域が時計表示における秒の１の桁に該当する領域であるか否かを判定する処理である。
【００９０】
画像比較部３２は、画像格納部２２に格納されている画像の領域内において対象変化領域（画像格納部２２に格納されている座標によって示される変化領域）に一致する領域の画像（以下、対象変化領域画像ａと表記）を、画像格納部２２に格納されている画像から取得（抽出）する。このとき、画像比較部３２は、任意の画像（例えば上述した画像採取処理において最初に取得された画像）と共に画像格納部２２に格納されている日時情報によって示される日時を基準として、１秒間隔（１秒毎）の画像の各々から１１枚の対象変化領域画像ａを取得する（ステップＳ４１）。つまり、画像比較部３２は、１秒間隔の１１枚の画像の各々から対象変化領域画像ａを取得する。画像比較部３２は、画像格納部２２に格納されている対象変化領域を示す座標及び画像格納部２２に画像と共に格納されている日時を示す日時情報に基づいて対象変化領域画像ａの取得処理を実行する。
【００９１】
次に、画像比較部３２は、取得された１１枚の対象変化領域画像ａを配列p[0]〜p[10]に格納する（ステップＳ４２）。
【００９２】
画像比較部３２は、配列p[0]〜p[9]に格納された対象変化領域画像ａの各々が異なる（当該対象変化領域画像ａが全て異なる）か否かを判定する（ステップＳ４３）。
【００９３】
配列p[0]〜p[9]に格納された対象変化領域画像ａの各々が異なると判定された場合（ステップＳ４３のＹＥＳ）、画像比較部３２は、配列p[0]及びp[10]に格納された対象変化領域画像ａが一致するか否かを判定する（ステップＳ４４）。
【００９４】
配列p[0]及びp[10]に格納された対象変化領域画像ａが一致すると判定された場合（ステップＳ４４のＹＥＳ）、画像比較部３２は、対象変化領域が秒の１の桁（に該当する領域）であると判定する（ステップＳ４５）。換言すれば、画像比較部３２は、対象変化領域が定期変化領域であると判定する。
【００９５】
なお、ステップＳ４３において配列p[0]〜p[9]に格納された対象変化領域画像ａの各々が異ならない（つまり、配列p[0]〜p[9]に格納された対象変化領域画像ａのうちの少なくとも２つが一致する）と判定された場合、画像比較部３２は、対象変化領域が時計表示における秒の１の桁（に該当する領域）でないと判定する。この場合、画像比較部３２は、対象変化領域が時計表示における秒の１０の桁に該当する領域であるか否かの判定処理（つまり、第２の判定処理）を実行する（ステップＳ４６）。
【００９６】
また、ステップＳ４４において配列p[0]及びp[10]に格納された対象変化領域画像ａが一致しないと判定された場合、ステップＳ４６の処理が実行される。
【００９７】
上記したように、第１の判定処理においては、１秒間隔の画像の各々から取得された１１枚の対象変化領域画像ａのうち、配列p[0]〜p[9]に格納された対象変化領域画像ａの各々が異なり、かつ、配列p[0]及びp[10]に格納された対象変化領域画像ａが一致する場合には、対象変化領域は時計表示における秒の１の桁（つまり、１秒毎に変化する領域）であると判定される。換言すれば、第１の判定処理においては、１秒間隔の１１枚の対象変化領域画像ａのうちの１０枚（１枚目〜１０枚目）の対象変化領域画像ａの各々が異なり、かつ、１枚目及び１１枚目の対象変化領域画像ａが一致する（つまり、１枚目の対象変化領域画像ａと当該対象変化領域画像ａから１０秒後の対象変化領域画像ａとが一致する）場合には、対象変化領域は時計表示における秒の１の桁であると判定される。
【００９８】
次に、図１０のフローチャートを参照して、前述した第２の判定処理（図９に示すステップＳ４６の処理）の処理手順について説明する。第２の判定処理は、対象変化領域が時計表示における秒の１０の桁に該当する領域であるか否かを判定する処理である。
【００９９】
まず、画像比較部３２は、画像格納部２２に格納されている画像の領域内において対象変化領域に一致する領域の画像（以下、対象変化領域画像ｂと表記）を、画像格納部２２に格納されている画像から取得する。このとき、画像比較部２２は、例えば画像採取処理において最初に取得された画像と共に画像格納部２２に格納されている日時情報によって示される日時を基準として、当該画像格納部２２に格納されている１０秒間隔（１０秒毎）の画像の各々から７枚の対象変化領域画像ｂを取得する（ステップＳ６１）。つまり、画像比較部３２は、１０秒間隔の７枚の画像の各々から対象変化領域画像ｂを取得する。画像比較部３２は、画像格納部２２に格納されている対象変化領域を示す座標及び画像格納部２２に画像と共に格納されている日時を示す日時情報に基づいて対象変化領域画像ｂの取得処理を実行する。
【０１００】
画像比較部３２は、取得された７枚の対象変化領域画像ｂを配列p[0]〜p[6]に格納する（ステップＳ６２）。
【０１０１】
画像比較部３２は、配列p[0]〜p[5]に格納された対象変化領域画像ｂの各々が異なる（当該対象変化領域画像ｂが全て異なる）か否かを判定する（ステップＳ６３）。
【０１０２】
配列p[0]〜p[5]に格納された対象変化領域画像ｂの各々が異なると判定された場合（ステップＳ６３のＹＥＳ）、画像比較部３２は、配列p[0]及びp[6]に格納された対象変化領域画像ｂが一致するか否かを判定する（ステップＳ６４）。
【０１０３】
配列p[0]及びp[6]に格納された対象変化領域画像ｂが一致すると判定された場合（ステップＳ６４のＹＥＳ）、画像比較部３２は、対象変化領域が秒の１０の桁（に該当する領域）であると判定する（ステップＳ６５）。換言すれば、画像比較部３２は、対象変化領域が定期変化領域であると判定する。
【０１０４】
なお、ステップＳ６３において配列p[0]〜p[5]に格納された対象変化領域画像ｂの各々が異ならない（つまり、配列p[0]〜p[5]に格納された対象変化領域画像ｂのうちの少なくとも２つが一致する）と判定された場合、画像比較部３２は、対象変化領域が時計表示における秒の１０の桁（に該当する領域）でないと判定する。この場合、画像比較部３２は、対象変化領域が時計表示における分の１の桁に該当する領域であるか否かの判定処理（つまり、第３の判定処理）を実行する（ステップＳ６６）。
【０１０５】
また、ステップＳ６４において配列p[0]及びp[6]に格納された対象変化領域画像ｂが一致しないと判定された場合、ステップＳ６６の処理が実行される。
【０１０６】
上記したように、第２の判定処理においては、１０秒間隔の画像の各々から取得された７枚の対象変化領域画像ｂのうち、配列p[0]〜p[5]に格納された対象変化領域画像ｂの各々が異なり、かつ、配列p[0]及びp[6]に格納された対象変化領域画像ｂが一致する場合には、対象変化領域は時計表示における秒の１０の桁（つまり、１０秒毎に変化する領域）であると判定される。換言すれば、第２の判定処理においては、１０秒間隔の７枚の対象変化領域画像ｂのうちの６枚（１枚目〜６枚目）の対象変化領域画像ｂの各々が異なり、１枚目及び７枚目の対象変化領域画像ｂが一致する（つまり、１枚目の対象変化領域画像ｂと当該対象変化領域画像ｂから１分後の対象変化領域画像ｂとが一致する）場合には、対象変化領域は時計表示における秒の１０の桁であると判定される。
【０１０７】
次に、図１１のフローチャートを参照して、前述した第３の判定処理（図１０に示すステップＳ６６の処理）の処理手順について説明する。第３の判定処理は、対象変化領域が時計表示における分の１の桁に該当する領域であるか否かを判定する処理である。
【０１０８】
まず、画像比較部３２は、画像格納部２２に格納されている画像の領域内において対象変化領域に一致する領域の画像（以下、対象変化領域画像ｃと表記）を、画像格納部２２に格納されている画像から取得する。このとき、画像比較部３２は、例えば画像採取処理において最初に取得された画像と共に画像格納部２２に格納されている日時情報によって示される日時を基準として、当該画像格納部２２に格納されている１分間隔（１分毎）の画像の各々から１１枚の対象変化領域画像ｃを取得する（ステップＳ８１）。つまり、画像比較部３２は、１分間隔の１１枚の画像の各々から対象変化領域画像ｃを取得する。画像比較部３２は、画像格納部２２に格納されている対象変化領域を示す座標及び画像格納部２２に画像と共に格納されている日時を示す日時情報に基づいて対象変化領域画像ｃの取得処理を実行する。
【０１０９】
画像比較部３２は、取得された１１枚の対象変化領域画像ｃを配列p[0]〜p[10]に格納する（ステップＳ８２）。
【０１１０】
画像比較部３２は、配列p[0]〜p[9]に格納された対象変化領域画像ｃの各々が異なる（当該対象変化領域画像ｃが全て異なる）か否かを判定する（ステップＳ８３）。
【０１１１】
配列p[0]〜p[9]に格納された対象変化領域画像ｃの各々が異なると判定された場合（ステップＳ８３のＹＥＳ）、画像比較部３２は、配列p[0]及びp[10]に格納された対象変化領域画像ｃが一致するか否かを判定する（ステップＳ８４）。
【０１１２】
配列p[0]及びp[10]に格納された対象変化領域画像ｃが一致すると判定された場合（ステップＳ８４のＹＥＳ）、画像比較部３２は、対象変化領域が分の１の桁（に該当する領域）であると判定する（ステップＳ８５）。換言すれば、画像比較部３２は、対象変化領域が定期変化領域であると判定する。
【０１１３】
なお、ステップＳ８３において配列p[0]〜p[9]に格納された対象変化領域画像ｃの各々が異ならない（つまり、配列p[0]〜p[9]に格納された対象変化領域画像ｃのうちの少なくとも２つが一致する）と判定された場合、画像比較部３２は、対象変化領域が時計表示における分の１の桁（に該当する領域）でないと判定する。この場合、画像比較部３２は、対象変化領域が時計表示における分の１０の桁に該当する領域であるか否かの判定処理（つまり、第４の判定処理）を実行する（ステップＳ８６）。
【０１１４】
また、ステップＳ８４において配列p[0]及びp[10]に格納された対象変化領域画像ｃが一致しないと判定された場合、ステップＳ８６の処理が実行される。
【０１１５】
上記したように、第３の判定処理においては、１分間隔の画像の各々から取得された１１枚の対象変化領域画像ｃのうち、配列p[0]〜p[9]に格納された対象変化領域画像ｃの各々が異なり、かつ、配列p[0]及びp[10]に格納された対象変化領域画像ｃが一致する場合には、対象変化領域は時計表示における分の１の桁（つまり、１分毎に変化する領域）であると判定される。換言すれば、第３の判定処理においては、１分間隔の１１枚の対象変化領域画像ｃのうちの１０枚（１枚目〜１０枚目）の対象変化領域画像ｃの各々が異なり、１枚目及び１１枚目の対象変化領域画像ｃが一致する（つまり、１枚目の対象変化領域画像ｃと当該対象変化領域画像ｃから１０分後の対象変化領域画像ｃとが一致する）場合には、対象変化領域は時計表示における分の１の桁であると判定される。
【０１１６】
次に、図１２のフローチャートを参照して、前述した第４の判定処理（図１１に示すステップＳ８６の処理）の処理手順について説明する。第４の判定処理は、対象変化領域が時計表示における分の１０の桁に該当する領域であるか否かを判定する処理である。
【０１１７】
まず、画像比較部３２は、画像格納部２２に格納されている画像の領域内において対象変化領域に一致する領域の画像（以下、対象変化領域画像ｄと表記）を、画像格納部２２に格納されている画像から取得する。このとき、画像比較部３２は、例えば画像採取処理において最初に取得された画像と共に画像格納部２２に格納されている日時情報によって示される日時を基準として、当該画像格納部２２に格納されている１０分間隔（１０秒毎）の画像の各々から７枚の対象変化領域画像ｄを取得する（ステップＳ１０１）。つまり、画像比較部３２は、１０分間隔の７枚の画像の各々から対象変化領域画像ｄを取得する。画像比較部３２は、画像格納部２２に格納されている対象変化領域を示す座標及び画像格納部２２に画像と共に格納されている日時を示す日時情報に基づいて対象変化領域画像ｄの取得処理を実行する。
【０１１８】
画像比較部３２は、取得された７枚の対象変化領域画像ｄを配列p[0]〜p[6]に格納する（ステップＳ１０２）。
【０１１９】
画像比較部３２は、配列p[0]〜p[5]に格納された対象変化領域画像ｄの各々が異なる（当該対象変化領域画像ｄが全て異なる）か否かを判定する（ステップＳ１０３）。
【０１２０】
配列p[0]〜p[5]に格納された対象変化領域画像ｄの各々が異なると判定された場合（ステップＳ１０３のＹＥＳ）、画像比較部３２は、配列p[0]及びp[6]に格納された対象変化領域画像ｄが一致するか否かを判定する（ステップＳ１０４）。
【０１２１】
配列p[0]及びp[6]に格納された対象変化領域画像ｄが一致すると判定された場合（ステップＳ１０４のＹＥＳ）、画像比較部３２は、対象変化領域が分の１０の桁（に該当する領域）であると判定する（ステップＳ１０５）。換言すれば、画像比較部３２は、対象変化領域が定期変化領域であると判定する。
【０１２２】
なお、ステップＳ１０３において配列p[0]〜p[5]に格納された対象変化領域画像ｄの各々が異ならない（つまり、配列p[0]〜p[5]に格納された対象変化領域画像ｄのうちの少なくとも２つが一致する）と判定された場合、画像比較部３２は、対象変化領域が時計表示における分の１０の桁（に該当する領域）でないと判定する。この場合、画像比較部３２は、対象変化領域が時計表示における時の１の桁に該当する領域であるか否かの判定処理（つまり、第５の判定処理）を実行する（ステップＳ１０６）。
【０１２３】
また、ステップＳ１０４において配列p[0]及びp[6]に格納された対象変化領域画像ｄが一致しないと判定された場合、ステップＳ１０６の処理が実行される。
【０１２４】
上記したように、第４の判定処理においては、１０分間隔の画像の各々から取得された７枚の対象変化領域画像ｄのうち、配列p[0]〜p[5]に格納された対象変化領域画像ｄの各々が異なり、かつ、配列p[0]及びp[6]に格納された対象変化領域画像ｄが一致する場合には、対象変化領域は時計表示における分の１０の桁（つまり、１０分毎に変化する領域）であると判定される。換言すれば、第４の判定処理においては、１０分間隔の７枚の対象変化領域画像ｄのうちの６枚（１枚目〜６枚目）の対象変化領域画像ｄの各々が異なり、１枚目及び７枚目の対象変化領域画像ｄが一致する（つまり、１枚目の対象変化領域画像ｄと当該対象変化領域画像ｄから１時間後の画像とが一致する）場合には、対象変化領域は時計表示における分の１０の桁であると判定される。
【０１２５】
次に、図１３のフローチャートを参照して、前述した第５の判定処理（図１２に示すステップＳ１０６の処理）の処理手順について説明する。第５の判定処理は、対象変化領域が時計表示における時の１の桁に該当する領域であるか否かを判定する処理である。
【０１２６】
まず、画像比較部３２は、画像格納部２２に格納されている画像の領域内において対象変化領域に一致する領域の画像（以下、対象変化領域画像ｅと表記）を、画像格納部２２に格納されている画像から取得する（ステップＳ１２１）。画像比較部３２は、画像格納部２２に格納されている例えば上述した画像採取処理において最初に取得された画像から対象変化領域画像ｅを取得する。画像比較部３２は、画像格納部２２に格納されている対象変化領域を示す座標及び画像格納部２２に画像と共に格納されている日時を示す日時情報に基づいて対象変化領域画像ｅの取得処理を実行する。ステップＳ１２１の処理が実行されると、画像比較部３２は、Count（の値）に１を代入する（ステップＳ１２２）。
【０１２７】
画像比較部３２は、Countが２４であるか否かを判定する（ステップＳ１２３）。Countが２４でないと判定された場合（ステップＳ１２３のＮＯ）、画像比較部３２は、画像格納部２２に格納されている対象変化領域を示す座標及び日時情報に基づいて、対象変化領域画像ｅのCount時間後の画像から対象変化領域に一致する領域の画像（以下、対象変化領域画像ｆと表記）を取得する（ステップＳ１２４）。
【０１２８】
次に、画像比較部３２は、対象変化領域画像ｅと対象変化領域画像ｆとを比較する。画像比較部３２は、比較結果に基づいて、対象変化領域画像ｅ及び対象変化領域画像ｆが異なるか（つまり、不一致であるか）否かを判定する（ステップＳ１２５）。
【０１２９】
対象変化領域画像ｅ及び対象変化領域画像ｆが異なると判定された場合（ステップＳ１２５のＹＥＳ）、画像比較部３２は、Countに１を加算する（ステップＳ１２６）。ステップＳ１２６の処理が実行されると、ステップＳ１２３に戻って処理が繰り返される。
【０１３０】
また、ステップＳ１２３においてCountが２４であると判定された場合、画像比較部３２は、対象変化領域が時の１の桁（に該当する領域）であると判定する（ステップＳ１２７）。換言すれば、画像比較部３２は、対象変化領域が定期変化領域であると判定する。
【０１３１】
また、ステップＳ１２５において対象変化領域画像ｅ及び対象変化領域画像ｆが異ならない（つまり、一致する）と判定された場合、画像比較部３２は、Countが所定値であるか否かを判定する（ステップＳ１２８）。
【０１３２】
ここで、所定値とは、例えば２、４、１０、１２及び１４である。例えば対象変化領域が時計表示における時の１の桁に該当する領域である場合であってもCountがステップＳ１２８における所定値である場合は、時計表示の１２時間表記または２４時間表記に応じてステップＳ１２５において対象変化領域画像ｅ及び対象変化領域画像ｆが一致すると判定される場合がある。つまり、ステップＳ１２８における所定値は、このような場合に対象変化領域が時計表示における時の１の桁に該当する領域でないと判定されることを回避するために予め定められている。
【０１３３】
Countが所定値であると判定された場合（ステップＳ１２８のＹＥＳ）、ステップＳ１２６の処理が実行される。
【０１３４】
一方、Countが所定値でないと判定された場合（ステップＳ１２８のＮＯ）、画像比較部３２は、対象変化領域が時計表示における時の１の桁でないと判定する。この場合、画像比較部３２は、対象変化領域が時計表示における時の１０の桁に該当する領域であるか否かの判定処理（第６の判定処理）を実行する（ステップＳ１２９）。
【０１３５】
上記したように、第５の判定処理においては、ステップＳ１２１において取得された対象変化領域画像ｅが当該対象変化領域画像ｅの１〜２３（ステップＳ１２８における所定値を除く）時間後の画像から取得された対象変化領域画像ｆと異なる場合には、対象変化領域は時計表示における時の１の桁（つまり、１時間毎に変化する領域）であると判定される。
【０１３６】
次に、図１４のフローチャートを参照して、前述した第６の判定処理（図１３に示すステップＳ１２９の処理）の処理手順について説明する。第６の判定処理は、対象変化領域が時計表示における時の１０の桁に該当する領域であるか否かを判定する処理である。
【０１３７】
まず、画像比較部３２は、画像格納部２２に格納されている画像の領域内において対象変化領域に一致する領域の画像（以下、対象変化領域画像ｇと表記）を、画像格納部２２に格納されている画像から取得する。このとき、画像比較部３２は、例えば上述した画像採取処理において最初に取得された画像と共に画像格納部２２に格納されている日時情報によって示される日時を基準として、１時間間隔（一時間毎）の画像の各々から２４枚の対象変化領域画像ｇを取得する（ステップＳ１４１）。つまり、画像比較部３２は、１時間間隔の２４枚の画像の各々から対象変化領域画像ｇを取得する。画像比較部３２は、画像格納部２２に格納されている対象変化領域を示す座標及び画像格納部２２に画像と共に格納されている日時を示す日時情報に基づいて対象変化領域画像ｇの取得処理を実行する。
【０１３８】
次に、画像比較部３２は、取得された２４枚の対象変化領域画像ｇを配列pに格納する（ステップＳ１４２）。
【０１３９】
画像比較部３２は、配列pに格納された２４枚の対象変化領域画像ｇにおいて２４枚目の対象変化領域画像ｇの次の画像を１枚目の対象変化領域画像ｇとしたときに、当該２４枚の対象変化領域画像ｇが所定の条件を満たすか否かを判定する（ステップＳ１４３）。
【０１４０】
ここで、ステップＳ１４３における所定の条件には、例えば第１及び第２の条件が含まれるものとする。
【０１４１】
第１の条件は、時計表示が１２時間表記である場合における時の１０の桁に対応する条件である。第１の条件は、１時間間隔の２４枚の対象変化領域画像ｇにおいて同一の画像が１０枚、２枚、１０枚、２枚と連続することを示す。ここで、例えば対象変化領域が１２時間表記の時計表示における時の１０の桁である場合を想定する。この場合、１時間間隔の２４枚の対象変化領域画像ｇにおいては、１２時間表記の例えば午前０時から午前９時までの連続する１０枚の対象変化領域画像ｇは同一である。また、１時間間隔の２４枚の対象変化領域画像ｇにおいては、１２時間表記の例えば午前１０時及び午前１１時の連続する２枚の対象変化領域画像ｇは同一である。更に、１時間間隔の２４枚の対象変化領域画像ｇにおいては、１２時間表記の例えば午後０時から午後９時までの連続する１０枚の対象変化領域画像ｇは同一である。更に、１時間間隔の２４枚の対象変化領域画像ｇにおいては、１２時間表記の例えば午後１０時及び午後１１時の連続する２枚の対象変化領域画像ｇは同一である。これにより、１時間間隔の２４枚の対象変化領域画像ｇが第１の条件を満たす場合には、対象変化領域は１２時間表記の時計表示における時の１０の桁であると判定できる。
【０１４２】
第２の条件は、時計表示が２４時間表記である場合における時の１０の桁に対応する条件である。第２の条件は、１時間間隔の２４枚の対象変化領域画像ｇにおいて同一の画像が１０枚、１０枚、４枚と連続することを示す。ここで、例えば対象変化領域が２４時間表記の時計表示における時の１０の桁である場合を想定する。この場合、１時間間隔の２４枚の対象変化領域画像ｇにおいては、２４時間表記の０時から９時までの連続する１０枚の対象変化領域画像ｇは同一である。また、１時間間隔の２４枚の対象変化領域画像ｇにおいては、２４時間表記の１０時から１９時までの連続する１０枚の対象変化領域画像ｇは同一である。更に、１時間間隔の２４枚の対象変化領域画像ｇにおいては、２４時間表記の２０から２３時までの連続する４枚の対象変化領域画像ｇは同一である。これにより、１時間間隔の２４枚の対象変化領域画像ｇが第２の条件を満たす場合には、対象変化領域は２４時間表記の時計表示における時の１０の桁であると判定できる。
【０１４３】
２４枚の対象変化領域画像ｇが所定の条件を満たす、つまり、上記した第１の条件及び第２の条件のいずれかを満たすと判定された場合（ステップＳ１４３のＹＥＳ）、画像比較部３２は、対象変化領域が時の１０の桁（に該当する領域）であると判定する（ステップＳ１４４）。換言すれば、画像比較部３２は、対象変化領域が定期変化領域であると判定する。
【０１４４】
一方、２４枚の対象変化領域画像ｇが所定の条件を満たさない、つまり、上記した第１の条件及び第２の条件のいずれも満たさないと判定された場合（ステップＳ１４３のＮＯ）、画像比較部３２は、対象変化領域が不定期変化領域（メッセージ等が表示される領域）であると判定する（ステップＳ１４５）。
【０１４５】
上記したように、第６の判定処理においては、１時間間隔の画像の各々から取得された２４枚の対象変化領域画像ｇが第１及び第２の条件のいずれかを満たす場合には、対象変化領域は時計表示における時の１０の桁であると判定される。
【０１４６】
上述したように本実施形態においては、例えば端末５０の画面上に表示される画像が１秒毎に１日分取得され、当該取得された画像が比較されることにより当該画像における変化領域が算出される。本実施形態においては、算出された各変化領域に対して上述した第１〜第６の判定処理が実行されることにより、当該変化領域が時計表示における定期変化領域であるかメッセージ等が表示される不定期変化領域であるかが判定される。つまり、本実施形態においては、端末５０の画面上に表示される画像から不定期変化領域（及び定期変化領域）を抽出（変化領域から時計が表示されている領域を分別）することができる。本実施形態においては、判定結果に応じて、定期変化領域を示す座標及び不定期変化領域を示す座標が表示装置に表示される。
【０１４７】
これにより、本実施形態においては、ユーザは例えば表示装置に表示された定期変化領域及び不定期変化領域を示す座標を確認することで、例えば端末５０に表示される画像を目視で確認することなく監視すべき対象となる領域（例えばメッセージ等が表示される領域）を特定することができる。したがって、本実施形態においては、ユーザの目視による労力を軽減し、確認の省力化を可能とする。
【０１４８】
なお、本実施形態においては、画像解析装置３０が例えば端末５０とは異なる装置であるものとして説明したが、例えば画像解析装置３０の機能を端末５０が有していても構わない。この場合、端末５０においては、抽出された不定期変化領域（を示す座標）を、自動的に端末５０の画面上に表示される画像における変化の監視領域として設定（つまり、自動的に監視領域を調整）することができる。これにより、端末５０において監視の必要がある領域を自動的に絞り込むことが可能となるため、結果として当該端末５０における画像処理量を削減することが可能となる。
【０１４９】
また、本実施形態においては、端末５０の画面上に表示される画像を画像取得部３１が取得するものとして説明したが、例えば既に採取された画像が画像格納部２２に格納されており、当該画像に対して処理が実行される構成であっても構わない。
【０１５０】
また、本実施形態においては、時計表示における定期変化領域が抽出されるものとして説明したが、例えば当該時計表示に付随して定期的に変化する領域（例えば１２時間毎に変化する「午前」または「午後」等が表示される領域）についても定期変化領域として抽出可能である。
【０１５１】
また、上記説明においては省略したが、図３に示すように、時計表示において例えば「：」が点滅表示されている場合がある。この場合において、例えば１秒周期で「：」が点滅（つまり、０．５秒毎に表示が変化）する場合を想定する。この場合、本実施形態においては画像が１秒毎に取得されるため、当該「：」が表示される領域においては常に同一の画像が取得されることになる。したがって、このような場合には、「：」が表示される領域は変化のない領域（不変領域）とされることになる。
【０１５２】
［第２の実施形態］
次に、図１５を参照して、本発明の第２の実施形態について説明する。図１５は、本実施形態に係る画像解析装置の主として機能構成を示すブロック図である。なお、前述した図４と同様の部分には同一参照符号を付してその詳しい説明を省略する。ここでは、図４と異なる部分について主に述べる。
【０１５３】
また、本実施形態に係る画像解析装置のハードウェア構成は、前述した第１の実施形態と同様であるため、適宜、図１を用いて説明する。
【０１５４】
本実施形態においては、端末５０の画面上に表示される画像から文字列を抽出し、当該抽出された文字列が不定期に変化する文字列（以下、不定期変化文字列と表記）であるか定期的に変化する文字列（以下、定期変化文字列と表記）であるかを判定することにより、不定期変化領域または定期変化領域を抽出する点が、前述した第１の実施形態とは異なる。
【０１５５】
図１５に示すように、画像解析装置３００は、画像取得部３０１、画像変換部３０２及び文字列比較部３０３を含む。本実施形態において、これらの各部３０１乃至３０３は、前述した図１に示すコンピュータ１０が外部記憶装置２０に格納されているプログラム２１を実行することにより実現されるものとする。
【０１５６】
また、画像解析装置３００は、文字列格納部２３を有する。本実施形態において、文字列格納部２３は、例えば外部記憶装置２０に格納される。
【０１５７】
画像取得部３０１は、前述した図２に示すビル監視システムにおける端末５０の画面上に表示される画像のうち、予め設定された領域の画像を例えば１秒毎に取得する。画像取得部３０１は、例えば１日分の画像を取得する。なお、予め設定された領域には、図１６に示すように時計表示のための定期的に変化する文字列とメッセージ等の表示のための不定期に変化する文字列が表示されるものとする。
【０１５８】
画像変換部３０２は、画像取得部３０１によって取得された画像の各々に対して文字認識処理をして、当該画像に表示される文字列を当該画像から抽出する。ここで、図１６は、端末５０の画面上に表示される画像（画像取得部３０１によって取得された画像）の一例を示す。図１６に示す例では、画像変換部３０２は、画像取得部３０１によって取得された画像から文字列「２０：５９  Ｍｅｓｓａｇｅ」を抽出する。画像変換部３０２は、抽出された文字列を、当該文字列が抽出された画像毎に文字列格納部２３に格納する。
【０１５９】
また、画像変換部３０２は、抽出された文字列と共に、当該文字列が抽出された画像が画像取得部３０１によって取得された日時（を示す日時情報）及び当該画像取得部３０１によって取得された画像において当該文字列が表示されている領域（当該文字列に該当する領域）を示す座標を文字列格納部２３に格納する。
【０１６０】
文字列比較部３０３は、文字列格納部２３に格納された各文字列を比較する。この場合、文字列比較部３０３は、対応する文字列（画像取得部３０１によって取得された画像の各々において同一の領域に表示される文字列）同士を比較する。文字列比較部３０３は、比較結果に基づいて、変化のある文字列（以下、変化文字列と表記）と当該変化文字列以外の文字列とに分ける。
【０１６１】
文字列比較部３０３は、対応する変化文字列（画像の各々において同一の領域に表示される変化文字列）に基づいて、当該変化文字列が不定期変化文字列（メッセージ等の文字列）であるか定期変化文字列（時計表示における文字列）であるかを判定する。
【０１６２】
本実施形態に係る画像解析装置３００に含まれる文字列比較部３０３は、上記した変化文字列に対して前述した第１〜第６の判定処理に相当する処理を実行する。つまり、前述した第１の実施形態における第１〜第６の判定処理においては変化領域に一致する領域の画像（変化領域画像）を比較することにより時計表示に該当する領域（定期変化領域）であるかメッセージ等が表示される領域（不定期変化領域）であるかが判定されたが、本実施形態においては、変化文字列を比較することにより時計表示に該当する文字列（定期変化文字列）であるかメッセージ等に該当する文字列であるかが判定される。この点以外については、前述した第１の実施形態における第１〜第６の判定処理と同様であるため、その詳しい説明を省略する。
【０１６３】
なお、文字列比較部３０３によって変化文字列が不定期変化文字列（または定期変化文字列）と判定された場合、当該判定結果及び文字列格納部２３に格納されている当該変化文字列に該当する領域の座標が不定期変化領域（又は定期変化領域）の座標として表示装置に表示される。つまり、本実施形態においても、前述した第１の実施形態と同様に、不定期変化領域（または定期変化領域）の座標がユーザに対して提示される。
【０１６４】
なお、本実施形態に係る画像解析装置３００においては、文字列格納部２３に格納された文字列に基づいて処理が実行されるため、前述した第１の実施形態における矩形解析処理は実行されない。
【０１６５】
上記したように本実施形態においては、画像取得部３０１によって取得された画像に対して文字認識処理を実行することにより当該画像から文字列を抽出し、当該抽出された文字列を比較することにより不定期変化文字列または定期変化文字列を判定することができる。これにより、本実施形態においては、不定期変化文字列に該当する領域の座標または定期変化文字列に該当する領域の座標をユーザに対して提示することができる。
【０１６６】
つまり、本実施形態においては、前述した第１の実施形態と比較して、矩形解析処理等を省略することができるため、画像解析装置３００の処理量を軽減することが可能となる。更に、本実施形態においては、画像から抽出された文字列を比較するため、前述した第１の実施形態と比較してより精密な判定処理を実行することが可能となる。
【０１６７】
なお、本実施形態においては、端末５０の画面上に表示される画像を画像取得部３０１が取得するものとして説明したが、例えば既に採取された画像を格納する画像格納部（図示せず）を備え、当該画像に対して処理が実行される構成であっても構わない。
【０１６８】
また、本願発明は、上記各実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組合せにより種々の発明を形成できる。例えば、各実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組合せてもよい。  
【符号の説明】
【０１６９】
１０…コンピュータ、２０…外部記憶装置、２２…画像格納部、２３…文字列格納部、３０，３００…画像解析装置、３１，３０１…画像取得部、３２…画像比較部、３３…表示部、３０２…画像変換部、３０３…文字列比較部。
【図１】
2011135222.tif 000003
【図２】
2011135222.tif 000004
【図３】
2011135222.tif 000005
【図４】
2011135222.tif 000006
【図５】
2011135222.tif 000007
【図６】
2011135222.tif 000008
【図７】
2011135222.tif 000009
【図８】
2011135222.tif 000010
【図９】
2011135222.tif 000011
【図１０】
2011135222.tif 000012
【図１１】
2011135222.tif 000013
【図１２】
2011135222.tif 000014
【図１３】
2011135222.tif 000015
【図１４】
2011135222.tif 000016
【図１５】
2011135222.tif 000017
【図１６】
2011135222.tif 000018