(57)【要約】見通し通信を行う無線装置における通信障害の発生を精度よく予測する方法が開示される。無線装置は、指向性アンテナの電波方向と光軸が一致する撮像部１５０を備え、記憶部１１０に基準画像を記憶しておき、定期的に、通信相手である無線通信装置１１及びその近傍を撮像し、制御部１００が、定期的に撮像した画像と基準画像とを比較して、明るさの変化に影響を受けにくい正規化相互相関により類似度を算出し、重み付けした類似度に基づいて、監視対象となる領域の状態を示す指標値を算出して、指標値が特定の数値以下の場合に異常を検出して、異常が検出される状態が一定期間継続した場合に、撮像画像を含むアラート情報を出力する。
2015182752.tif 000002
【特許請求の範囲】
【請求項１】
指向性アンテナを用いて相手装置と無線通信を行う無線通信装置であって、
前記指向性アンテナの電波方向と光軸が一致し、監視対象となる前記相手装置を含む領域の画像を撮像する撮像部と、
前記撮像部で撮像され、基準となる基準画像を記憶する記憶部と、
定期的に前記撮像部で撮像された撮像画像を取得して、正規化相互相関により前記撮像画像と前記基準画像の前記監視対象となる領域における類似度を算出し、重み付けした前記類似度に基づいて、前記監視対象となる領域の状態を示す指標値を算出して、前記指標値が特定の数値以下の場合に異常を検出して、前記異常が検出される状態が一定期間継続した場合に、前記撮像画像を含むアラート情報を出力する通信障害予測処理を行う制御部とを備えたことを特徴とする無線通信装置。
【請求項２】
制御部が、監視対象となる領域として、相手装置を含む監視領域と、前記監視領域を拡張した拡張領域を複数に分割した分割ブロックとを設定しておき、通信障害予測処理において、前記監視領域及び前記各分割ブロックについて、撮像画像と基準画像との類似度を算出して、前記監視対象となる領域の状態を示す指標値として、前記監視領域及び前記分割ブロック毎の類似度を統合した統合指標値を算出し、前記統合指標値が予め設定された閾値以下となった場合に、異常を検出することを特徴とする請求項１記載の無線通信装置。
【請求項３】
制御部が、通信障害予測処理において、各分割ブロックの重要度に応じて前記各分割ブロックの類似度に重み付けを行って、前記重み付けされた類似度に基づいて統合指標値を算出することを特徴とする請求項２記載の無線通信装置。
【請求項４】
記憶部が、撮像画像を記憶すると共に、前記撮像画像毎に各分割ブロックの特定期間の類似度を記憶しておき、
制御部が、通信障害予測処理において異常を検出した場合に、現在までの前記特定期間の各分割ブロックにおける類似度の変化傾向に基づいて異常の原因を推定し、前記推定される原因を示す情報をアラート情報に含めて出力することを特徴とする請求項２又は３記載の無線通信装置。
【請求項５】
互いに対向して設置された１対の無線通信装置を備えた無線通信システムであって、
前記無線通信装置が、請求項１乃至４のいずれか記載の無線通信装置であることを特徴とする無線通信システム。
【請求項６】
無線通信装置の制御部が、通信障害予測処理において異常を検出した場合に、相手装置における通信障害予測処理の処理結果を取得して、自装置における処理結果に前記相手装置における処理結果を加えて、前記異常の原因を推定することを特徴とする請求項５記載の無線通信システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、指向性アンテナを用いた無線通信装置及び無線通信システムに係り、特に、保守の負荷を低減すると共に通信障害の発生を精度よく予測して、通信の信頼性を向上させることができる無線通信装置及び無線通信システムに関する。
【背景技術】
【０００２】
［先行技術の説明］
従来、準ミリ波〜ミリ波帯を利用するＦＷＡ（Fixed Wireless Access）無線通信システムとして、鋭い指向性を持つアンテナを用いて、特定の固定通信装置間でPoint-to-Pointの無線通信を行うものがある。
対になる通信装置のアンテナは互いに対向して設けられている。【０００３】
このような無線通信システムでは、アンテナ方向のずれや、２点間に建物が新設されることによって、無線信号が相手に直線的に（無反射で）到達する「見通し」が悪くなり、通信障害が発生するリスクがある。
通信障害の可能性を前もって検知できれば、基地局を移設する等の対策を取ることが可能となるため、画像解析によって通信障害の発生を予測する技術が開発されている。【０００４】
例えば、通信装置に相手方の通信装置を撮影する撮像装置を内蔵して、撮影した画像をユーザが逐次チェックして異常を検出する手法や、画像のフレーム間方向での輝度差を計算して、輝度差が大きい場合にアラートを発報する手段が開発されている。【０００５】
しかしながら、撮影された画像全てを保守員がチェックするのは非常に煩雑で、作業の負荷が大きく、また、輝度差の比較によるアラート発報では、天候や日照条件など通信障害とは関係ない事象に対しても反応してしまい、アラートの誤発報が多い。【０００６】
［関連技術］
画像に基づいて通信障害の発生を予測する技術としては、国際公開第２０１３／１２５２６５号公報「無線通信装置、無線通信方法、及び無線通信システム」（株式会社日立国際電気、特許文献１）があった。
特許文献１には、光軸が指向性アンテナのメインローブ方向と同方向に向けられた撮像手段を備え、対向する無線通信装置への見通しを示す基準画像を撮像して基準画像データとして記憶しておき、定期的に撮像した撮像画像データを基準画像データと比較して、障害物が電波方向に向かっていることを検知して通知することが記載されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】国際公開第２０１３／１２５２６５号公報
【非特許文献】
【０００８】
【非特許文献１】“Eyeontenna”，[online]，2010年8月20日，KMW Communications、インターネット＜URL:http://www.kmw.co.kr/eng/support/upload/Eyeontenna.pdf＞
【発明の概要】
【発明が解決しようとする課題】
【０００９】
上述したように、従来の無線通信装置及び無線通信システムにおいては、目視でチェックして通信障害の発生を予測する場合は、画像をチェックする保守員の作業が煩雑で負荷が大きく、また、画像の輝度差に基づいて判断する場合は、天候や日照条件の違い等によるアラートの誤発報が多いという問題点があった。【００１０】
尚、特許文献１には、監視対象を含む監視領域を拡張した分割監視領域を分割した分割ブロックについて、基準画像との類似度を算出し、監視領域と分割ブロックの類似度を統合して現在の状態の正常／異常を判断し、異常が一定期間継続した場合にアラート情報を送信することや、時間的な類似度の変化傾向を考慮して異常の原因を推定することは記載されていない。【００１１】
本発明は上記実状に鑑みて為されたもので、保守の負荷を低減すると共に通信障害の発生を精度よく予測して、通信の信頼性を向上させることができる無線通信装置及び無線通信システムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
本発明の一側面は、指向性アンテナを用いて相手装置と無線通信を行う無線通信装置であって、指向性アンテナの放射軸と一致する光軸を有して監視対象となる相手装置を含む領域の画像を撮像する撮像部と、該撮像部で撮像され、基準となる基準画像を記憶する記憶部と、定期的に撮像部で撮像された撮像画像を取得して、正規化相互相関により撮像画像と基準画像の監視対象となる領域における類似度を算出し、重み付けした類似度に基づいて、監視対象となる領域の状態を示す指標値を算出して、指標値が特定の数値以下の場合に異常を検出して、異常が検出される状態が一定期間継続した場合に、撮像画像を含むアラート情報を出力する通信障害予測処理を行う制御部とを備えたことを特徴としている。【００１３】
また、本発明の他の側面は、上記無線通信装置において、制御部が、監視対象となる領域として、相手装置を含む監視領域と、監視領域を拡張した拡張領域を複数に分割した分割ブロックとを設定しておき、通信障害予測処理において、監視領域及び各分割ブロックについて、撮像画像と基準画像との類似度を算出して、監視対象となる領域の状態を示す指標値として、監視領域及び分割ブロック毎の類似度を統合した統合指標値を算出し、統合指標値が予め設定された閾値以下となった場合に、異常を検出することを特徴としている。【００１４】
また、本発明の他の側面は、上記無線通信装置において、制御部が、通信障害予測処理において、各分割ブロックの重要度に応じて各分割ブロックの類似度に重み付けを行って、重み付けされた類似度に基づいて統合指標値を算出することを特徴としている。【００１５】
また、本発明の他の側面は、上記無線通信装置において、記憶部が、撮像画像を記憶すると共に、撮像画像毎に各分割ブロックの特定期間の類似度を記憶しておき、制御部が、通信障害予測処理において異常を検出した場合に、現在までの特定期間の各分割ブロックにおける類似度の変化傾向に基づいて異常の原因を推定し、推定される原因を示す情報をアラート情報に含めて出力することを特徴としている。【００１６】
また、本発明の他の側面は、互いに対向して設置された１対の無線通信装置を備えた無線通信システムであって、無線通信装置が、上記いずれかの無線通信装置であることを特徴としている。【００１７】
また、本発明の他の側面は、上記無線通信システムにおいて、無線通信装置の制御部が、通信障害予測処理において異常を検出した場合に、相手装置における通信障害予測処理の処理結果を取得して、自装置における処理結果に相手装置における処理結果を加えて、異常の原因を推定することを特徴としている。
【発明の効果】
【００１８】
本発明によれば、指向性アンテナを用いて相手装置と無線通信を行う無線通信装置であって、指向性アンテナの電波方向と光軸が一致し、監視対象となる相手装置を含む領域の画像を撮像する撮像部と、撮像部で撮像され、基準となる基準画像を記憶する記憶部と、定期的に撮像部で撮像された撮像画像を取得して、正規化相互相関により撮像画像と基準画像の監視対象となる領域における類似度を算出し、重み付けした類似度に基づいて、監視対象となる領域の状態を示す指標値を算出して、指標値が特定の数値以下の場合に異常を検出して、異常が検出される状態が一定期間継続した場合に、撮像画像を含むアラート情報を出力する通信障害予測処理を行う制御部とを備え無線送受信装置としているので、保守員の負荷を低減することができ、また、通信とは関係ない明るさの変化に過度に反応することなく、時間的な類似度の変化も考慮して通信障害の発生を精度よく予測することができると共にアラートの誤発報を防ぎ、通信障害を未然に防いで通信の信頼性を向上させることができる効果がある。【００１９】
また、本発明によれば、制御部が、監視対象となる領域として、相手装置を含む監視領域と、監視領域を拡張した拡張領域を複数に分割した分割ブロックとを設定しておき、通信障害予測処理において、監視領域及び各分割ブロックについて、撮像画像と基準画像との類似度を算出して、監視対象となる領域の状態を示す指標値として、監視領域及び分割ブロック毎の類似度を統合した統合指標値を算出し、統合指標値が予め設定された閾値以下となった場合に、異常を検出する上記無線通信装置としているので、監視対象となる領域毎に重要度や信頼度によって類似度に重み付けを行って、きめ細かく且つ総合的に監視対象の状態を監視することができ、通信障害につながる異常を精度よく検出し、アラートの誤発報を防ぐことができる効果がある。【００２０】
また、本発明によれば、記憶部が、撮像画像を記憶すると共に、撮像画像毎に各分割ブロックの特定期間の類似度を記憶しておき、制御部が、通信障害予測処理において異常を検出した場合に、現在までの特定期間の各分割ブロックにおける類似度の変化傾向に基づいて異常の原因を推定し、推定される原因を示す情報をアラート情報に含めて出力する上記無線通信装置としているので、保守員は、通信障害につながる原因に早期に対応することができ、通信の信頼性を向上させることができる効果がある。
【図面の簡単な説明】
【００２１】
【図１】本発明の実施の形態に係る無線通信システムの構成を示す概略図である。
【図２】無線通信装置１０の外観図である。
【図３】無線通信装置１０の構成ブロック図である。
【図４】本システムの保守装置２０の構成ブロック図である。
【図５】監視領域の設定例を示す説明図である。
【図６】分割監視領域の設定例を示す説明図である。
【図７】撮像画像の例を示す図である。
【図８】通信障害予測処理の概要を示すフローチャートである。
【図９】現状撮像処理のフローチャートである。
【図１０】画像解析テーブルの説明図である。
【図１１】画像解析処理のフローチャートである。
【図１２】アラート発報処理を示すフローチャートである。
【図１３】原因推定テーブルの説明図である。
【図１４】基準画像更新処理を示すフローチャートである。
【発明を実施するための形態】
【００２２】
本発明の実施の形態について図面を参照しながら説明する。［実施の形態の概要］
本発明の実施の形態に係る無線通信システム（本システム）は、無線通信装置（本装置）に指向性アンテナの電波方向と光軸が一致する撮像手段を備え、条件が良好なときに撮像した画像を基準画像として記憶しておき、通信相手である無線通信装置及びその近傍を撮像し、制御部が、定期的に撮像した画像と基準画像とを比較して、明るさの変化に影響を受けにくい正規化相互相関によるテンプレートマッチング手法で類似度を算出し、類似度が低い状態が一定期間持続した場合に保守端末にアラートを発報する構成としており、保守員の作業負荷を軽減すると共に、天候や日照等の外乱ノイズによる誤発報を防ぎ、通信障害の発生を容易に且つ精度よく予測して、実際の障害発生を未然に防ぐことができ、通信の信頼性を向上させることができるものである。
【００２３】
また、本発明の実施の形態に係る無線通信装置は、監視範囲を複数のブロックに分割し、撮像画像をブロック毎に基準画像と比較して類似度を算出するものであり、画像を精度良く解析することができると共に、ブロック毎の類似度の変化から通信障害の原因を推定することができ、迅速に対応可能とするものである。
【００２４】
［実施の形態に係る無線通信システムの構成：図１］
図１は、本発明の実施の形態に係る無線通信システムＸの構成を示す概略図である。無線通信システムＸは、接続元機器と接続先機器との間の通信を中継する通信システムであり、無線通信装置１０，１１と、保守端末２０とを備えている。
図１の例では、無線通信装置１０は、ネットワーク５を介して保守端末２０及び接続先機器と接続されており、無線通信装置１１は、ネットワーク６を介して接続元機器に接続されている。
【００２５】
無線通信装置１０、１１は同様の構成を備え、Ｐ−Ｐ通信用の対向型の無線通信装置である。無線通信装置１０、１１は、データ通信用の無線リピータとして機能し、例えば指向性の高い２５ＧＨｚのミリ波帯、準ミリ波帯等を用いて数kmの距離で数100Mbpsもしくはそれ以上のレートで双方向に対向通信を行う。
無線通信装置１０、１１は、起動時の状態によって一方がマスタ装置、他方がスレーブ装置として自動設定され、周波数チャンネル等も自動で選択させることできる。
また、無線通信装置１０，１１は、画像を撮像する撮像部を備えており、互いに相手の画像を撮像して通信障害の予測に利用している。
【００２６】
そして、本システムの特徴として、無線通信装置１０、１１は、その見通し線上に障害物３０（物体）が建築された等で、無線通信の障害を検知した場合、画像を含む通信障害情報を保守装置２０に送信する。
また、無線通信装置１０、１１は、所定間隔で定期的に画像を撮像し、画像に異常があれば、画像及び推定原因の情報を含むアラート情報（警告情報）を保守装置２０に送信する。
【００２７】
保守装置２０は、無線通信システムＸの管理者が用いる保守や管理用のＰＣ、汎用機、サーバ等の装置である。
保守装置２０は、無線通信装置１０、１１に対して各種パラメータの設定を行い、また、撮像された画像データや各種センサのデータ及び受信信号強度のデータ等を要求することもできる。
【００２８】
ネットワーク５、６は、任意のＩＰネットワークであり、無線通信装置１０、１１と例えば１０００ＢＡＳＥ−Ｔ等により接続される。ネットワーク５、６は、スイッチ、ルータ、ＰＣ（Person al Computer）、サーバ、スマートフォン、タブレット等の接続先機器と接続することができる。
また、ネットワーク５、６は、ルータ等を用いてインターネットや携帯電話網やＰＨＳ網等の他のネットワークと接続してもよい。
【００２９】
本システムでは、無線通信装置１０、１１間の通信異常を、実際に発生する前に検出するため、画像を撮影して基準画像と比較して解析し、それに基づいて迅速で精度のよいアラート出力を行うものである。画像の撮像や解析の処理については後で詳細に説明する。
無線通信装置１０，１１は同様の構成及び動作であるため、以下の説明においては、無線通信装置１０を例として説明する。
【００３０】
［無線通信装置１０の外観：図２］
次に、図２を参照して、無線通信装置１０の外観について説明する。図２は、無線通信装置１０の外観図である。
図２に示すように、無線通信装置１０は、アンテナ、高周波部、信号処理部（PHY）、ＭＡＣ処理部、インタフェース部等を一体に内蔵する筐体１２と、ポール等への取り付け金具である取り付け部１３とから主に構成されている。
また、筐体１２には、アンテナの指向性方向を確認するためのスコープ部１４を備えている。さらに、筐体１２には、アンテナの指向性方向と同一方向にカメラの光軸が向くように設定された撮像部１５を備えている。撮像部１５は、カメラ等である。
【００３１】
また、撮像部１５は、通信相手の無線通信装置１１及び通信経路上の画像を撮像するものであり、アンテナの指向性のある方向に、例えば数度程度の視野角の画像のみ撮像する。更に、撮像部１５は、カメラの光軸を雲台等で変更できないように構成することが好適である。これにより、無線通信装置１０に係るプライバシー上の問題を少なくすることができる。撮像部１５は、スマートフォンなどに内蔵されるカメラセンサモジュールと適切な固定ズームレンズを組み合わせて実現できる。
【００３２】
［無線通信装置１０の構成ブロック：図３］
次に、図３を参照して、本システムの無線通信装置１０の具体的な制御構成について説明する。図３は、無線通信装置１０の機能ブロック図である。
図３に示すように、無線通信装置１０は、図２に示した筐体１２の内部に、主として、制御部１００と、記憶部１１０と、無線送受信部１２０と、信号強度測定部１３０と、同期検出部１３５と、ネットワーク送受信部１４０と、撮像部１５０と、画像処理部１６０と、レーザー出力部１７０と、タイマー部１８０とを備えている。各部は、例えば共通のバス等で接続される。尚、撮像部１５０は、図２に示した撮像部１５と同等である。
【００３３】
無線通信装置１０の各部について具体的に説明する。
［制御部１００］
制御部１００は、ＧＰＰ（General Purpose Processor）、ＣＰＵ（Central Processing Unit）、ＤＳＰ（Digital Signal Processor）、ＳｏＣ(System-on-a-chip)等の組込みコンピュータであり、各部を制御する。
【００３４】
本装置の特徴に関する制御としては、制御部１００は、撮像部１５０に対して相手装置の無線通信装置を含む画像の撮影（撮像）を指示する。
撮像は、送受信時に取得された電波状態が異常の場合に行うと共に、通信異常が発生する前から定期的に監視するため、タイマー部１８０に基づいて行う。
電波状態の監視としては、信号強度測定部１３０からの受信信号強度や、同期検出部１３５からの同期検出を用いる。
また、制御部１００は、保守装置２０からの指示や現地の作業員による操作に応じて撮像部１５０に撮像を指示することも可能である。
【００３５】
そして、本装置の特徴として、制御部１００は、撮像された画像（撮像画像）に基づいて、通信障害が発生する前に、障害発生を予測してアラートを出力する通信障害予測処理を行う。通信障害予測処理については後述する。
【００３６】
［記憶部１１０］
記憶部１１０は、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＨＤＤ（Hard Disk Drive）等で構成され、制御部１００が実行するプログラムやデータ、各種の設定値、及び画像データを記憶している。
画像データとしては、正常時の基準となる基準画像データと、運用時に撮像された撮像画像データ、また一定期間の撮像画像の平均である平均画像データ等がある。これらの画像データの詳細については後述する。
記憶されている設定値やデータとしては、撮像を判定するための信号強度の閾値（信号強度撮像閾値）、撮像間隔設定値、アラート情報のデータフォーマット等がある。
【００３７】
更に、本装置の特徴として、記憶部１１０は、撮像された画像データを解析し、アラート情報を出力するか否かを判断するためのデータを記憶する画像解析テーブルと、アラート情報を出力する前に、検出された異常の原因を推定するための基準となる原因推定テーブルを備えている。これらのテーブルについても後述する。
【００３８】
また、記憶部１１０は、後述する重み付き統合類似度の閾値や、スコアの閾値を記憶している。
尚、記憶部１１０は、例えば、ＵＳＢメモリやＳＤカード等の脱着可能な記録媒体を含んでいてもよく、記録媒体にも画像データを記憶可能である。
【００３９】
［無線送受信部１２０］
無線送受信部１２０は、アンテナ、ＲＦ（Radio Frequency）手段（無線通信手段）、デジタル変復調手段、Ａ／Ｄ（Analog/Digital）変換手段、Ｄ／Ａ（Digital/Analog）変換手段、符復号化手段、暗号化手段、ＱｏＳスケジューリング手段等を含み、無線信号の送受信を行う。また任意の伝送路状況に応じて最善なスループットが得られるように適応変調符号化（ＡＭＣ）を行う。
無線送受信部１２０のアンテナは、搬送波が広がりにくいペンシルビームアンテナ等の指向性アンテナを用いることが好適である。
また、無線送受信部１２０は、電波の送受信を、時分割双方向通信（ＴＤＤ；Time Division Duplex）や周波数分割双方向通信（ＦＤＤ;Frequency Division Duplex）等の方式で行うことができる。
【００４０】
［信号強度測定部１３０］
信号強度測定部１３０は、無線送受信部１２０からの電波について、受信信号強度の測定や受信品質に係るＳ／Ｎ比等の取得を行うものであり、これらの測定値が基準値より低ければ制御部１００に受信信号強度が異常である旨報知する。適応変調符号化を実施している場合は、現在の変調方式や符号化方式の情報もあわせて取得する。
【００４１】
［同期検出部１３５］
同期検出部１３５は、受信した無線信号に含まれる同期信号やプリアンブル等を検出し、無線伝送されて同期信号を復元すると共に、同期信号の復元の有無を検出する。そして、同期信号やプリアンブルの検出が正常に行われなかった場合に、同期検出が異常である旨報知する。
信号強度測定部１３０及び同期検出部１３５の機能は通常、無線送受信部１２０内に構成され得る。
【００４２】
［ネットワーク送受信部１４０］
ネットワーク送受信部１４０は、ネットワーク５又は６に接続するための、例えば、１０００ＢＡＳＥ−Ｔ／１００ＢＡＳＥ−ＴＸ規格のインタフェースであり、伝送媒体に即したＭＡＣ層処理を行う。つまり無線送受信部１２０で扱っている無線伝送ペイロードや、制御部１００で発生する保守装置との通信等を、ネットワーク５又は６に接続する。
また、ネットワーク送受信部１４０は、例えば、ＰｏＥ（Power on Ethernet、Ethernetは商標）による電源供給を行うための電源部やバッテリ等を備えてもよい。またブリッジ処理やルータ処理を行ってもよい。
【００４３】
［撮像部１５０］
撮像部１５０は、制御部１００からの指示に応じて相手先の無線通信装置１１を含む画像を撮影し、赤外線や可視光用のカラー／モノクロの光信号を電気信号に変換するものであり、撮像素子とＡ／Ｄコンバータ等を備えている。撮像素子としては、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）、ＣＣＤ（Charge Coupled Device）等がある。
【００４４】
ここで、撮像部１５０は、主に対向する無線通信装置１１への電波通信が障害物で遮られることなく到達する「見通し」を確認する程度の狭い範囲のみ撮像する。
撮像部１５０は、無線送受信部１２０の指向性アンテナとカメラの光軸が一致する視野角０．５〜５度程度の所定角度の範囲のみ撮像できるようにすると、また、プライバシーに配慮することができる。
【００４５】
撮像部１５０は、光学レンズ、ズームレンズ、及び雨水や埃等の侵入を防ぐカバーを備えてもよい。
適度な光学ズーム倍率のレンズの使用により、撮像素子に必要な画素数を減らすことができる。また夜間に動く被写体を撮影する目的ではないため、感度はあまり必要なく、大きな撮像素子を使用する必要がないため、コストを削減できる。
尚、撮像部１５０は、必ずしも無線通信装置１０と一体に構成するものに限らず、分離していてもよい。また、静止画像だけでなく動画像を撮像可能としてもよい。
尚、後述するように、「見通し」の判断にはレーザーを用いてもよい。
【００４６】
［画像処理部１６０］
画像処理部１６０は、撮像部１５０からの電気信号を画像処理して、所定のフォーマット、例えばＪＰＥＧ、ＪＰＥＧ２０００、ＰＮＧ、ＢＭＰ等の主に静止画像に変換する。その際、画像の容量の圧縮、ベクトルデータ化等を行うことも可能である。
画像処理部１６０は、ＤＳＰ（Digital Signal Processor）、ＧＰＵ（Graphics Processing Unit）、ＡＳＩＣ（Application Specific Integrated Circuit）等の画像処理用コンピュータで構成される。
【００４７】
また、画像処理部１６０は、記憶部１１０に記憶された過去の撮像画像に基づいて平均画像を作成し、画像同士の差分計算を行う。差分は、基準画像と撮像画像、又は平均画像と撮像画像との間で求められる。
【００４８】
また、画像処理部１６０は、ＦＦＴ（Fast Fourier Transform）やウェーブレット分析等を用いて画像のノイズ成分や特徴量の分析を行う。特徴量を分析することにより、雨や霧、陽炎等の環境要因を排除しながら、無線通信に障害をもたらす遮蔽物３０を高精度に判別ことが可能となる。
【００４９】
更に、画像処理部１６０は、時系列の撮像画像データを、動画ＧＩＦ、ＡＶＩ、ＭＯＶ、ＭＰＥＧ等の動画データに変換することも可能である。これにより、建物の建設の進捗等を保守装置２０から閲覧可能である。
【００５０】
［レーザー出力部１７０］
レーザー出力部１７０は、例えば、撮像部１５０で検知可能な赤外線等のレーザー信号を、無線送受信部１２０のアンテナの電波の方向と同方向に出力する。レーザー出力部１７０のレーザー信号を画像処理部１６０が検知して、「見通し」があるか否かを制御部１００が判定することも可能である。
レーザー光は、相手装置に到達するまでの間に適当な径に広がり、撮像部１５０に入射する。相手装置の画像処理部でロックイン検出するために、レーザー信号は、撮像部１５０の撮影レートより低速の既知の周期で或いは擬似雑音系列によりON／OFF変調されることが望ましい。相手装置との間の同期は、後述のＮＴＰ同期された時計或いは無線フレームナンバーのカウント等により行う。なおレーザー信号は、自装置から送信され、相手装置（又は障害物）によって反射された信号でもよいし、相手装置から送信されたレーザー信号であってもよい。あるいは、無線通信装置１０が設置されるビルに若しくは相手装置からの見通し線上に、航空障害灯及び昼間障害標識等が設置されている場合、それで代用できる。
【００５１】
［タイマー部１８０］
タイマー部１８０は、クオーツを備えたバッテリバックアップ・リアルタイムクロック（ＲＴＣ）やインターバルタイマー等で構成され、年／日／時／分／秒等の時刻を計測する。
また、保守装置２０から画像の撮像間隔を設定しておくことにより、タイマー１８０は定期的に制御部１００に対して撮像のタイミングを報知する。尚、タイマー部１８０の時刻は、制御部１００がインターネット等のタイムサーバ等から取得して、設定してもよい。
【００５２】
［その他］
なお、この他にも、無線通信装置１０は、降雨、日照、天候、風力、風向、温度、湿度等の周囲環境に係るデータを取得するセンサ類を備えていてもよい。このセンサ類で取得した値も、記憶部１１０に記憶する。
また、無線通信装置１０は、ポータブル保守装置と直接接続する受信電力モニタ端子、シリアル／ＵＳＢ端子、無線ＬＡＮインタフェース等を備えていてもよい。
【００５３】
［保守装置２０の構成：図４］
次に、本システムの保守装置２０の構成について図４を用いて説明する。図４は、本システムの保守装置２０の構成ブロック図である。
図４に示すように、本システムの保守装置２０は、制御部２００と、記憶部２１０と、表示部２２０と、入力部２３０と、ネットワーク送受信部２４０とを備えている。
【００５４】
制御部２００は、演算手段であり、保守装置２０全体の制御を行うものである。
記憶部２１０は、制御部２００で実行する保守用プログラムを記憶すると共に、無線通信装置１０から送信されたアラート情報を記憶し、蓄積している。
表示部２２０は、アラート情報に含まれる画像やメッセージを表示して管理者に閲覧可能とし、また、保守用の画面等を表示する。
入力部２３０は、管理者の指示や設定値等を入力する。
ネットワーク送受信部２４０は、ネットワーク５，６に接続するインタフェースである。
【００５５】
［監視領域の設定：図５］
本装置における動作を具体的に説明する前に、画像を監視して通信障害の発生を予測する際の監視対象となる監視領域の設定例について図５を用いて説明する。図５は、監視領域の設定例を示す説明図である。
図５に示すように、通信相手の無線通信装置１１を撮像部１５０で撮影すると、例えば、図５全体の画像が取得される。
【００５６】
この内、重要な監視対象となるのは、無線通信装置１１及びその近傍であり、この領域を監視領域７０として指定する。
具体的には、初期設定時において、どの範囲を監視領域７０とするかを、例えば保守員が画面上で矩形で囲んで指定すると、記憶部１１０に、画像全体における監視領域７０の座標データが監視領域データとして記憶される。
【００５７】
尚、撮像部１５０のカメラと無線通信装置１０の光軸がハードウェア上で同じであれば、撮像画像中での相手通信装置１１の位置は画像の中心付近に一意に決定でき、自動で監視範囲７０が決定されるようにしてもよい。組立上の精度が不足した場合に備え、ユーザが任意に監視範囲を指定するインタフェースが用意されている。図５では監視領域７０が画像の中央上寄りに設定された例が示されているが、実際には中央付近である。
監視領域７０を指定する際の形状は矩形に限らず、円、長円（楕円）、多角形等或いは単なる１つの点であってもよい。点で指定された場合は、所定のサイズの領域に自動的に拡張される。
画像の比較時には、制御部１００は、基準画像の監視領域７０と撮像画像の監視領域７０との比較を行って類似度を算出するものである。
【００５８】
［分割監視領域の設定：図６］
更に、本装置においては、監視領域７０だけでなく、監視領域７０を拡張し、複数に分割した分割監視領域についても監視対象の領域として監視を行う。分割監視領域について図６を用いて説明する。図６は、分割監視領域の設定例を示す説明図である。
図６に示すように、分割監視領域８０は、図５に示した監視領域７０を上下左右に広げた領域であり、更に領域全体を４段３列に分割して、左上から右下に向かって、分割ブロック８（1,1）、８（1,2）、...８（4,3）とする。そして、各分割ブロック８（m,n）について基準画像との比較を行う。尚、分割監視領域８０は、請求項における拡張領域に相当する。
【００５９】
分割監視領域８０の形状及び分割ブロックの形状は、保守員が個別に入力してもよいし、予め形状のパターンを入力しておいて、基準となる位置を画面上で指定することで制御部１００によって分割監視領域８０が特定されるようにしてもよい。
更に、個々の分割ブロック８は、他の分割ブロック８と一部重なっていてもよい。
【００６０】
分割監視領域８０を設けることにより、きめ細かい画像監視を可能とすると共に、通信障害が発生することを予測した場合に、その原因を推定することができるものである。例えば、分割監視領域８０の下のほうの分割部ロック８から順に類似度が低くなっている場合、建物が建設されつつあることが考えられる。
更に、分割ブロック毎に重み付けすることにより、緊急性の高い異常を迅速に検出してアラート発報したり、また、画像の信頼性の低いブロックを識別することができるものである。
【００６１】
図７は、分割監視領域の他の設定例を示す説明図である。本例では通信装置１１の位置を点で指定すると、それを中心に大きさの異なる３つの円領域と、その下方に画像下端まで延びる台形領域が自動で設定され、それぞれの領域は、図６の分割ブロック同様、類似度の低下の順や重み付けを用いた識別に利用できる。通信装置１０と１１の間の無線伝送路は、空中に円柱状に形成されていると考えられ、その断面は、自己の通信装置１０のごく近くでは、図７の外側の円のように、通信装置１１の像よりかなり大きくなる。
【００６２】
［通信障害予測処理：図８］
上述したように、本装置では、実際に通信障害により受信信号強度が劣化する前に、画像を監視することでその兆候を発見し、原因を推定し、画像情報及び推定原因を含むアラート情報を送信する通信障害予測処理を行う。
通信障害予測処理の概要について図８を用いて説明する。図８は、本装置における通信障害予測処理の概要を示すフローチャートである。
通信障害予測処理は、本装置の特徴部分であり、制御部１００が、各部と協働してハードウェア資源を用いて実行するものである。
【００６３】
図８に示すように、本装置は、まず、通信相手となる無線通信装置１１への見通しを判断するための基準画像を生成する（Ｓ１０１）。基準画像は、後述する画像解析処理のテンプレートマッチングにおいて、撮像画像と比較されるテンプレートになる画像である。
Ｓ１０１では、少なくとも１つの基準画像が、装置設置時や視界が良好な状態において、撮像部１５０により撮像された画像を平均化することで生成される。後述するように、昼夜（時刻）や天候、季節等の環境に応じて複数の平均化画像が記憶され、その中から選択した１つを基準画像として用いることができる。基準画像は、画像処理部１６０によって所定のデータフォーマットに変換されて、記憶部１１０に記憶される。
また、後述するように、本装置は、撮像画像の解析を行う毎に基準画像の信頼性をチェックして、必要であれば基準画像の更新或いは切替えを行う。
【００６４】
更に、本装置は、監視対象となる監視領域７０及び分割監視領域８０を設定し、記憶部１１０に記憶する（Ｓ１０２）。
装置の運用が開始されると、本装置は、定期的に現状を撮影する現状撮像処理を行う（Ｓ１０４）。現状撮像処理については後述する。
【００６５】
そして、本装置は、撮像を行うと、撮像条件が良好であるか、つまり撮像画像の信頼性が高いかどうかを判断する（Ｓ１０６）。例えば、画像が暗かったり、基準画像との差分が非常に大きかったりした場合、撮像画像もしくは基準画像の信頼性が低い。
撮像画像の信頼性が高くないと判断した場合には（Noの場合）、本装置は処理Ｓ１３０に移行する。これにより、信頼性の低い画像に基づいてアラートを発報してしまう誤発報を防ぐ。
【００６６】
一方、処理Ｓ１０６で撮像画像の信頼性が高い場合には（Yesの場合）、当該撮像画像を用いて画像解析処理を行う（Ｓ１１０）。画像解析処理では、監視領域７０及び分割監視領域８０について基準画像と撮像画像とを比較して、類似度を算出し、更に類似度に重み付けして指標値を算出し、更に指標値の時間的な変化を加味したスコアを算出する。スコアは、当該撮像画像での監視領域及び分割監視領域の状態が、通信異常が発生する可能性が高いかどうかを判断するための指標となる値である。
本装置では、類似度の算出において、明るさの変化に強い正規化相互相関によるテンプレートマッチングによって類似度を算出することにより、明るさの違いによる誤発報を低減する。
画像解析処理については後で説明する。
【００６７】
そして、本装置は、画像解析処理（Ｓ１１０）で算出されたスコアがアラート発報の基準となるスコアの閾値以下であるかどうかを判断し（Ｓ１１２）、閾値以下（類似度の低い状態が一定期間継続している場合）であれば（Yesの場合）、アラート発報処理を行う（Ｓ１２０）。発報されるアラート情報には、撮像画像データと、推定された障害の原因を示す情報とが含まれうる。アラート発報処理については後述する。
【００６８】
また、処理Ｓ１１２で、スコアが閾値を超えていた場合（類似度が高い、又は類似度の低い状態が一定期間継続していない場合）には（Noの場合）、基準画像更新処理を行って（Ｓ１３０）、処理Ｓ１０４に移行して現状の監視を続ける。基準画像の更新時定数は、障害物３０の建築に進展が確認できる程度の時間に設定され、通常は数日以上である。
【００６９】
図８に示すように、処理Ｓ１０４から処理Ｓ１３０の間はループになっており、通常は、タイマー部１８０から指示されるタイミングで処理Ｓ１０４が開始される。
ループ処理の実行間隔は、例えば１０分〜１日程度であり、保守装置２０から任意に設定可能としており、記憶部１１０に記憶されると共にタイマー部１８０に設定されている。
また、信号強度測定部１３０が測定した受信信号強度が、予め設定され記憶部１１０に記憶された信号強度撮像閾値を下回った場合、あるいはユーザが任意に実行を指示した場合は、定期的な実行間隔によらず直ちにＳ１０４〜Ｓ１３０を実行するようにしてもよい。
【００７０】
後述するように、本装置の通信障害予測処理では、昼夜や天候を考慮した処理を行って、正常時と現状との差分を正確に算出し、通信障害とは関係ない明るさの変化に過度に反応しないようにして、アラートの精度を向上させるものである。
また、監視領域７０だけでなく、分割監視領域８０の分割ブロック毎に画像の類似度を算出してそれに基づいて通信障害発生を予測して、きめ細かい現状認識を可能とすると共に、分割ブロック毎の類似度の変化によって通信障害の原因推定を可能とするものである。
以下、通信障害予測処理内の処理ブロックについて具体的に説明する。
【００７１】
［現状撮像処理：図９］
次に、図８の処理Ｓ１０４に示した現状撮像処理について図９を用いて説明する。
図９に示すように、現状撮像処理では、制御部１００は、タイマー部１８０からの撮像のタイミング等に基づいて撮像部１５０に指示を出力し、撮像部１５０は撮像を行う（Ｓ２０１）。この撮像は、１回の露出によるものに限らず、複数回の撮影により取得した複数の画像を平均化し、１つの撮像画像として出力することを含む。数分の間に撮影した数１０００枚のRAW画像を平均化することで、Ｓ／Ｎを改善することができる。このとき、露出（シャッタ速度や絞り）やフォーカスを変化させながら撮影してもよい。軸上色収差が大きいレンズでは、フォーカスの微動により、いずれかの色で合焦が改善した画像が得られる。
そして、画像処理部１６０が撮像画像を所定のデータフォーマットに変換し（Ｓ２０２）、変換された撮像画像を撮像画像データとして記憶部１１０に記憶する（Ｓ２０３）。基準画像と同じデータフォーマットに変換することにより、基準画像と撮像画像との比較を行うことができるものである。
【００７２】
そして、制御部１００は、現時点の昼夜を判定する（Ｓ２０４）。これは、昼と夜とでは画像の明るさやホワイトバランス等が異なるため、基準画像を切替えたり、それを考慮して基準画像との差の有意性を判断したりする。
昼夜の判定方法は、例えば、予め記憶部１１０に本装置が設置された地点の緯度と経度における日の出日の入りの時刻を記憶しておき、制御部１００が、タイマー部１８０から現在の日時を取得して、記憶された日の出日の入りの時刻と比較して昼夜を判定する。
【００７３】
更に、制御部１００は、現時点の日照（天候）条件を判定する（Ｓ２０５）。
昼であっても晴天時と曇天や雨天時、霧が発生している場合等では日照の状態が異なり、その違いによって陰影のできかた等が変化するため、基準画像との差分が大きくなってアラートを発報してしまうのを防ぐためである。日照条件のうち照度は、画像処理部１６０によって、画面全体あるいは人工的な光の影響を受けにくい領域の輝度の平均値等で表される明るさによって表現できる。
【００７４】
日照条件のうち大気透明度は、コントラストの大小を計測することにより、コントラストが小さい場合に、霧や雪等の視認性が悪い（視界が不良）状態を認識したり、画面全体のＳ／Ｎ比を求める方法等がある。或いは、ネットワーク経由で外部から気象情報データを取得して利用してもよい。なお日照条件が精度良く得られれば、Ｓ２０４の昼夜も自ずと判定できる。
【００７５】
昼夜判定の結果及び日照条件の判定結果は、撮像時の明るさ（照度）やコントラスト、Ｓ／Ｎ比を示す情報を含み、制御部１００は、これらの判定結果を明るさ情報として撮像画像データに対応付けて記憶部１１０に記憶し（Ｓ２０６）、現状撮像処理を終了して図８の処理Ｓ１０６に移行する。
【００７６】
図８の処理Ｓ１０６では、制御部１００は、記憶部１１０に記憶された明るさ情報に基づいて撮像画像の信頼性を評価し、例えば、視認性が悪い（よく見えない）場合や、コントラストやＳ／Ｎ比が基準画像とかけ離れている場合には、画像の信頼性が低いと判断することができる。
【００７７】
［画像解析テーブル：図１０］
ここで、記憶部１１０に記憶されている画像解析テーブルについて図１０を用いて説明する。図１０（ａ）は、監視対象となる領域を示す図であり、（ｂ）は、画像解析テーブルの一例を示す説明図である。
図１０（ｂ）に示す画像解析テーブルは、撮像画像データに対応して、図１０（ａ）に示した監視対象の監視領域７０及び分割監視領域８０の各分割ブロック８について、算出された類似度、各種統計値、及び、通信障害発生の有無を予測するため予め設定される各種データを記憶するテーブルである。
画像解析テーブルに記憶されたデータは、当該撮像画像での監視対象の状態が正常であるか異常であるかを判断するための指標値を算出する際に用いられる。
【００７８】
具体的には、図１０（ｂ）に示すように、画像解析テーブルは、監視領域７０と、分割監視領域８０の１２個の分割ブロック８のそれぞれについて、類似度と、類似度の平均値と、標準偏差と、しきい値と、正規化補正の補正値と、領域重み付け係数と、信頼度とを記憶しており、また、監視対象の領域全体に対応して、重み付き統合類似度と、正常／異常のクラスと、スコアとを記憶する。
【００７９】
各項目について説明する。
類似度は、後述する画像解析処理において算出された値であり、類似度が高いと通信障害発生の可能性は低く、類似度が低いと通信障害発生の可能性は高くなる。
ここでは、無線通信装置１１の近傍である監視領域７０の類似度は０．９５と高い値であるが、分割監視領域８０の右下ブロックである分割ブロック８（4,3）の類似度は０．４１と低くなっている。
【００８０】
平均は、現在から一定期間の過去において算出された類似度の平均値であり、標準偏差（σ）は、同じ一定期間において算出された類似度の標準偏差である。
平均及び標準偏差は、画像解析処理により類似度が算出されるたびに更新される。平均及び標準偏差を厳密に計算しようとすると、一定期間において算出された全ての類似度の値を保持しておく必要があるため、現在記憶している平均値、標準偏差と類似度から、近似的に計算してもよい。
【００８１】
閾値は、各領域の類似度を正常か異常かに分類する基準の値であり、予め与えられる値である。閾値よりも大きければ正常、閾値以下であれば異常とする。
本実施形態では、閾値を領域毎に異なる値としており、図１０の例では、（平均値−２σ）か、０．８０のいずれか低いほうとしている。例えば、監視領域７０のしきい値は、０．７９であり、分割ブロック８（2,1）のしきい値は０．６２である。また、全てのしきい値を同じ固定の値としてもよいし、（平均値−３σ）としてもよい。
尚、本形態では、後述する重み付き統合類似度を用いて画像の総合的な評価を行うため、閾値は必須ではないが、閾値を用いた各監視領域や分割ブロック毎の判断を主体とし、異常と判定された領域の数や、異常な領域の出現する順序関係などに基づいて総合的な判断をする実施形態とすることも可能である。
【００８２】
また、正規化補正の補正値は、領域間で類似度を正規化するための補正値である。領域内の絵柄によって高い類似度の得られやすさがことなるので、例えば類似度の平均値が低い領域に、１より大きな補正値を与え、類似度を補正する。
領域重み付け係数は、領域の空間的位置等に由来する重要度に応じて類似度に重み付けする係数であり、各領域の類似度を、総合的な通信障害発生の有無の判定にどの程度反映させるか、寄与の度合いを調整するものである。
【００８３】
図１０（ｂ）の例では、最も重要度の高い無線通信装置１１をカバーする監視領域７０の領域重み付け係数が最も大きく、０．５であり、分割監視領域８０の各分割ブロックの領域重み付け係数は、監視領域７０から離れるほど小さくなっている。つまり、監視領域７０を占有するような障害物は無線通信に致命的であるが、分割ブロック８（４,３）だけに掛かる障害物は、それが無線通信装置１１から近くにある場合に伝送路の一部を遮蔽しうるに過ぎない。なおここでは、領域重み付け係数の合計は１になるようにしている。
【００８４】
信頼度は、当該撮像画像に基づいて通信障害発生の有無を総合的に判定する場合に、各領域で算出された類似度を、どの程度寄与させるかを示す指標である。
例えば、図１０（ｂ）の例では、監視領域７０は信頼度１．０であり、監視領域の類似度は、通信障害発生の判断に大きく寄与するが、分割ブロック８（4,3）は信頼度０．００であり、今回撮像された撮像画像を用いた通信障害予測の判定において、当該分割ブロックの類似度は全く寄与しないことを示している。
【００８５】
画像解析テーブルにおいて、閾値や、正規化補正の補正値、領域重み付け係数、信頼度の各数値は、装置の運用開始前に保守装置２０から固定的に設定されてもよいし、画像解析処理において算出される類似度等の値に応じて適応制御してもよい。
【００８６】
統合類似度（重み付き統合類似度）は、当該撮像画像と基準画像とが監視対象の領域全体としてどの程度類似しているかを表す指標値である。
後述するように、統合類似度は、監視対象となる各領域の類似度に、画像解析テーブルに記憶された正規化補正値、領域重み付け係数、信頼度を乗算し、それらを合算することよって算出される。類似度に乗じられる係数が３つあることにより、それらの一部を手動設定（固定）、残りを自動設定（可変）にして用いることができる。
【００８７】
また、正常／異常のクラスは、統合類似度と、記憶されている統合類似度の閾値とを比較して、当該撮像画像の監視対象の領域が全体として「正常」（１）であるか「異常」（０）であるか、クラス分けした結果である。
更に、スコアは、クラス分けの結果を一定期間に亘って平均或いは蓄積した値である。スコアを算出することにより、正常／異常の状態の時間的な継続状態を反映させるものである。
統合類似度、正常／異常のクラス、スコアは、領域の数と必ずしも一致せず、テーブルの形態で保持される必要はない。
【００８８】
更に、本装置では、画像解析テーブルのデータを一定期間記憶部１１０に保持しておき、アラート発報の際にそのデータを用いて通信障害の原因推定を行うものである。★
【００８９】
［画像解析処理：図１１］
ここで、図８の処理Ｓ１１０に示した画像解析処理について図１１を参照しながら説明する。画像解析処理の主な内容は、制御部１００又は画像処理部１６０が、図１０で示した画像解析テーブルに基づいてスコアを算出することである。
最初にＳ３０１として、撮像画像の平均画像を更新し、記憶部１１０に記憶する。平均画像は、過去から現在までの特定期間の撮像画像を指数移動平均して得られる画像であり、昼夜（時刻）や天候、季節等に応じて複数のバージョンが作成され得る。Ｓ３０１の更新は、現在基準画像に採用されている平均画像そのものを置き換える様態や、採用された平均画像とは別個に生成する様態で行われ、別個に生成された平均画像は、採用された平均画像が（一時的に）適切でなくなった時などに、代わりに利用されうる。
【００９０】
平均画像を更新するのは、図８の処理Ｓ１０６で撮像画像の信頼性が高いと判断された場合である。平均画像データの更新は、ユーザが通信装置を設置した直後や、ユーザによる目視によるチェックがされた直後で、天候条件のよい数日間など、映像に異常がないことが既知な時のみ実行するようにしてもよい。
【００９１】
次にＳ３０２として、テンプレートマッチングにより基準画像と撮像画像とを比較して、類似度を算出する（Ｓ３０２）。
具体的には、基準画像と撮像画像の、監視領域７０及び分割監視領域８０について類似度を求める。基準画像には、図９の現状撮像処理で取得した昼夜や天候といった情報（明るさ情報）に基づいて、複数の平均画像の中から最適な１つが選択される。
類似度の算出は、同じ位置（同じ座標）の領域の画像データの比較によるものであり、基準画像と撮像画像の監視領域７０同士、及び分割監視領域８０の分割ブロック８（1,1）〜８（4,3）同士を比較して類似度を算出する。
【００９２】
その際、本装置では、テンプレートマッチング法の一種で、明るさ変化に強い正規化相互相関に基づいて演算を行う。正規化相互相関は、従来の輝度差による判定に比べて、明るさの変化を過度に検出しないので、多くの種類の平均画像を持たなくても、明るさの違いによるアラートの誤発報を低減できるものである。
【００９３】
基準画像データの監視領域７０の画素の輝度をＴ、撮像画像データの監視領域７０の画素の輝度をＩとし、監視領域７０を幅Ｍ、高さＮの矩形とする場合、正規化相互相関に基づく類似度Ｒznccは、式（１）で表される。
【００９４】
【数１】
2015182752.tif 000003
【００９５】
類似度の演算については、正規化相互相関の代わりに、ヒストグラム等化等のコントラスト補正後にＳＡＤ（Sum of Absolute Difference）を求めてもよく、等化後のヒストグラムの類似度（ヒストグラムインターセクション）を用いてもよい。或いは、画素値ベクトルを入力する特異スペクトル変換法（Singular Spectrum Transformation）で得られる特異ベクトルの内積値、ＳＩＦＴ（Scale-Invariant Feature Transform）等の特徴量での比較（距離）等を用いてもよい。
分割監視領域８０の各分割ブロック８についても同様に算出する。
そして、制御部１００は、監視領域７０及び分割監視領域８０の各分割ブロックについて算出された類似度を、上述した画像解析テーブルに一時的に保持する。更に、各領域について類似度の平均値や標準偏差も算出して、画像解析テーブルに保持する。
【００９６】
正規化相互相関を用いることによって、保持する平均画像の数を減らすことができるが、S１０４の現状撮像処理で取得した明るさ情報が、より多くの種類の詳細な撮影環境を示している場合、明るさ情報に基づいて類似度を補正することにより、更にロバスト性を向上させることができる。
【００９７】
次にＳ３０３として、制御部１００は、算出された各領域の類似度について統計或いは時間推移解析等を行い、対応する領域の閾値、領域重み付け係数、信頼度を決定し、画像解析テーブルに保持する。これら閾値等を固定値として運用する場合、Ｓ３０３は不要、或いは設置後の一定期間のみ行う。
例えば、過去３ヶ月間の各日の同時刻に取得した撮像画像データの類似度の平均及び標準偏差（σ）を算出し、平均値−２σや、平均値−３σを閾値とする。
【００９８】
また、信頼度については、類似度の標準偏差が他の領域よりも著しく大きい領域など、分割監視領域８０全体の類似度の傾向と明らかに異なる領域の信頼度を低く設定する。
特に、撮像画像データの明るさ情報が基準画像の明るさ情報と著しく異なる領域については、処理Ｓ３０３で当該領域の信頼度を低くして、判定に対する寄与率を小さくする。
更に、天候条件やノイズの影響を受けやすく、誤報の実績が多い領域に関して信頼度を低く設定する。
また、長期に亘って類似度の平均が低い領域についても信頼性が低いものとして、信頼度を低く設定する。
【００９９】
或いは、ある領域の現在の類似度または過去短期間の平均類似度に基づいて、他の領域の領域重み付け係数や信頼度を変化させてもよい。例えば、障害物３０の建設が、下から上に進行することに対応して、分割ブロック８（４，２）の類似度が低い時、その上方に位置する分割ブロック８（３，２）の重みを増加させる。これにより、障害物３０が分割ブロック８（３，２）と８（３，２）の両方に映り込んだ時に、実質的に線形加算を上回る重みを与えることができ、更に、分割ブロックに映り込む順序によって重みを異ならせることもできる。この様に、領域間の共起性の考慮された統合類似度を算出することができる。
【０１００】
本装置では、信頼度を設定するための基準となる情報が記憶部１１０に記憶されており、制御部１００はこれに基づいて各領域の信頼度を設定する。信頼度を調整することにより、通信障害発生の判定において、現在の監視対象が正確に反映されている信頼性の高い領域の類似度の寄与を大きくすると共に、正確に反映されていない恐れのある信頼性の低い領域の類似度の寄与を低減し、判定の精度を向上させることができる。
【０１０１】
次にＳ３０４として、制御部１００は、類似度及び画像解析テーブルに記憶されている数値を用いて、統合類似度（統合指標値）を算出する。
統合類似度は、領域毎の（類似度×領域重み付け係数×正規化補正値×信頼度）の値の総和を、信頼度の総和で除算することで算出される。すなわち、
統合類似度 ＝ Σ（類似度×領域重み付け係数×正規化補正値×信頼度）／Σ信頼度   である。
【０１０２】
統合類似度は、当該撮像画像で解析された監視対象の領域が、全体として、基準画像とどの程度類似しているかを示す指標値であり、重要な領域や信頼性の高い領域の類似度の寄与が大きくなっている。
【０１０３】
次にＳ３０５として、制御部１００は、算出された統合類似度について、正常／異常のクラス分けを行い、正常であれば「１」、異常であれば「０」を画像解析テーブルに記憶する。簡易な例では、現在の統合類似度を、記憶部１１０に記憶されている統合類似度の閾値と比較することで、正常／異常を判断する。
【０１０４】
更に複雑な手法としては、上記統合類似度は用いずに、機械学習アルゴリズムの一種であるランダムフォレスト（Random Forest）や1クラスサポートベクターマシン、エイダブースト（AdaBoost）などの学習手法によって、時空間方向の類似度の多変量の分布を学習しておき、現在から過去一定期間の類似度（領域重み付け係数等が乗じられている）を入力することで、正常クラスと異常クラスに分類するなどの方法をとってもよい。
なお、時間空間方向必ずしも２クラスで分類する必要はなく、「不確定」などのクラスを設けてもよいし、異常クラスもカメラのずれや障害物など原因ごとにクラスを分けてもよいし、クラスのような離散量でなく、識別器出力そのままの連続量でもよい。
【０１０５】
最後にＳ３０６として、制御部１００は、各領域のクラス分けの結果に基づいて、すぐに発報すべきかどうかを示す指標であるスコアを算出する。スコアは、例えばその値をしきい値処理するだけで、監視対象の領域において異常な状態が継続しているか否かが容易に判断できるような値であり、例えば、直近３日間のクラス分け結果の平均値である。
Ｓ３０６の後、図８の処理Ｓ１１２に移行する。スコアに基づいて異常状態を検出することにより、駐車車両や通行人、又は鳥が止まっているといった一時的な画像変化による異常検出を防ぐことができる。
Ｓ３０６の後、図８の処理Ｓ１１２に移行する。
【０１０６】
そして、図８の処理１１２では、制御部１００は、算出されたスコアに基づいて、直ちにアラート発報を行うかどうかを判定する。
例えば、算出されたスコアが記憶部１１０に記憶されているスコアの閾値（例えば０．２とする）以下となった場合、保守装置２０に対してアラート情報を送信するアラート発報処理を行う。
【０１０７】
スコアが閾値以下になるのは、「異常」にクラス分けされる状態が一定期間継続している場合や、「正常」と「異常」が混在するが「異常」が多い、つまり「異常」な状態が断続的に続いている、といった不安定な状態が継続している場合である。
これにより、本装置では、鳥や飛翔体、建築機械等による一時的な画像変化による異常検出を防ぎつつ、建築中の建造物などのゆっくりであるが確実に進行し伝送路に干渉する恐れのある障害物を、実際に通信電波を妨害する前に、察知して報知することができるものである。
【０１０８】
尚、簡便な処理として、処理Ｓ３０６でスコアとして「異常」にクラス分けされる状態が継続している期間を求めるようにしてもよい。
その場合、図８の処理Ｓ１１２で、「異常」が継続している期間が予め設定された特定期間（閾値）を超えた場合、例えば、「異常」と判定された場合にアラート発報処理（Ｓ１２０）に移行する。
【０１０９】
［アラート発報処理］
次に、図８のアラート発報処理Ｓ１２０の詳細について、図１２を参照して説明する。
アラート発報処理Ｓ１２０は、原因推定処理Ｓ４０１と、アラート発報実行処理Ｓ４０２を含む。
原因推定処理Ｓ４０１では、制御部１００は、記憶部１１０に記憶されている現在までの特定期間の画像解析テーブルのデータや受信信号強度のデータに基づいて、異常発生の原因を推定し、必要に応じてスクリーニングをする。具体的には、特徴量（各領域の類似度や受信信号強度）の空間的分布や時間的分布を求め、記憶部１１０に記憶されている原因推定テーブル（図１３）と比較して、変化傾向に基づいて異常の原因を推定する。原因推定処理Ｓ４０１は、Ｓ３０６の判断のみでは誤報が生じうる場合に有効であるが、必須ではなく、省略できる。
【０１１０】
例えば、分割監視領域の類似度が、下段の分割ブロックから順次低下していることを検出した場合には、制御部１００は、原因推定テーブルに基づいて、新規建造物による障害であると推定する。本装置では、各特徴量の変化傾向を検出するためのパラメータ等を記憶しており、制御部１００はそれに基づいて特徴量の変化傾向を検出する。原因推定テーブルの例については後述する。
【０１１１】
また、例えば、機械学習手法によって、予め正常時と各種の通信阻害要因がある場合とで、時空間方向の類似度の分布を学習しておき、その学習結果と実際に記憶部１１０に記憶された画像解析データ及び受信信号強度データを比較して、原因を推定してもよい。
【０１１２】
更に、当該装置で通信障害の発生を予測している場合、対となる相手装置でも同様に通信障害発生を予測している可能性が高いため、相手装置の処理結果を通信等により取得して、自装置での処理結果と共に相手装置の処理結果を考慮して原因を推定してもよい。
【０１１３】
アラート発報実行処理Ｓ４０２では、制御部１００は、直近の撮像画像データと、推定した原因の情報とを含むアラート情報を保守端末２０に対して送信し（Ｓ４０２）、図８の処理Ｓ１３０に示した基準画像更新処理に移行する。
【０１１４】
また、アラート発報後、制御部１００は、保守端末２０から、ユーザによって撮像画像データ等が解析された結果を受信して、当該アラート発報の正誤や、真の原因を取得して、以降の処理を調整することも可能である。例えば、誤発報であった場合や推定原因が誤っていた場合、次回の撮像時において、画像解析テーブルの領域毎の信頼度に反映させることで、更に精度を向上させることが考えられる。
【０１１５】
［原因推定テーブル：図１３］
次に、原因推定テーブルについて図１３を用いて説明する。図１３は、原因推定テーブルの説明図である。
原因推定テーブルは、原因推定処理Ｓ４０１において、スコアの元となった類似度等に立ち戻ってアラートの発生原因を推定するためのもので、特徴量の変化傾向（パターン）と、そのような変化傾向が出現した際に考えられる原因の可能性とを対応付けて記憶している。図１３の例では、変化傾向に対応して、新規建造物、装置ずれ、カメラ故障／汚れが原因となる可能性を３段階で表して記憶している。
【０１１６】
例えば、類似度が分割監視領域８０の下段の分割ブロック８から順に低下している場合、新規建造物の可能性が高く、カメラ故障や汚れであることも考えられる。但し、装置ずれの可能性は低い。
同様に、相手側通信装置１１において、本装置と同様の通信障害予測処理で異常と判定している場合、新規建造物の可能性が高く、他の原因である可能性は低い。
また、相手側通信装置において正常と判断している場合、相手からの見通しは良好であるため、新規建造物よりは、装置ずれやカメラ故障／汚れの可能性が高くなる。
【０１１７】
更に、図１３には示していないが、全ての分割ブロックで同時に類似度が低下している場合には、カメラのずれや天候ノイズの影響の可能性が高い。
本装置では、制御部１００が、原因推定処理Ｓ４０１の時に、記憶されている画像解析データや受信信号強度データの傾向を求め、図１３の原因推定テーブルと照合して、可能性の高い原因を特定している。アラート情報として送信する推定原因は、１つでもよいし、可能性の高い順に複数個としてもよい。原因推定処理は容易にプログラム可能なシェルスクリプト等で記述され実行されることが望ましく、原因推定テーブルはそれらスクリプト内に記述され得る。
【０１１８】
［基準画像更新処理：図１４］
次に、図８の処理１３０に示した基準画像更新処理について図１４を用いて説明する。図１４は、基準画像更新処理を示すフローチャートである。
図１４に示すように、基準画像更新処理が開始されると、制御部１００は、現在の基準画像の信頼性を評価する（Ｓ５０１）。
基準画像の信頼性は、制御部１００が、アラートの発生頻度や、画像解析処理において分割監視領域の類似度の時間推移を解析して得られる類似度の平均値や標準偏差を解析して基準画像の信頼性を示す指標値を算出し、指標値を予め設定された基準画像の信頼性を示す指標値の閾値と比較して、基準画像の信頼性を評価する。
【０１１９】
また、基準画像の信頼性を保守員等が目視により判断してもよい。例えば、アラート発生時の原因推定処理Ｓ４０１で、原因が、通信への影響がないものであると推定されていた場合には、基準画像データの信頼性は低いと評価される。通信への影響がない原因としては、季節変化や通信装置のずれ等がある。
【０１２０】
そして、制御部１００は、算出された指標値を閾値と比較して、信頼性が低いかどうかを判断する（Ｓ５０２）。
指標値が閾値以上であって、基準画像の信頼性が低くない場合（Noの場合）、基準画像の更新は不要であるため、基準画像更新処理を終わる。
【０１２１】
また、処理Ｓ５０２で指標値が閾値未満であって、基準画像の信頼性が低い場合（Yesの場合）、制御部１００は、記憶部１１０に記憶されている基準画像を更新し（Ｓ５０３）、基準画像更新処理を終わる。
新たな基準画像は、撮像条件が良好であれば現在時刻の画像でもよいし、記憶されている平均画像でもよい。
【０１２２】
尚、基準画像の信頼性が低い状態としては、初期撮像画像にノイズが多く運用当初から類似度が低い状態が続く場合や、あるいは初期撮像画像の撮像時と季節や周辺環境が変化し、類似度が低くなっている場合が想定される。
従って、運用当初は、類似度が高い状態が一定期間観測されなければ、基準画像の信頼性が低いとみなして自動更新してもよい。
また、長期運用時に類似度が低下する傾向を示した場合は、保守員によって通信障害発生の異常がないことを確認した上で、基準画像データを定期的にメンテナンス更新してもよい。
【０１２３】
そして、制御部１００は、図８の処理Ｓ１０４に移行して、次のタイミングで再び現状撮像処理を実行する。
このようにして本装置の処理が行われるものである。
【０１２４】
これにより、本装置及び本システムでは、保守員が無線通信装置１０，１１の設置場所に頻繁に行かなくても、「見通し」内の障害物や、障害が発生しつつある状況を、実際に通信障害が発生する前に検知することができるので、通信障害を未然に防ぎ、通信の信頼性を向上させることができるものである。
また、保守員は、保守装置２０を監視することで、通信障害となりそうな異常な状態を発見することができ、保守の負荷を大幅に軽減することができるものである。
尚、上記実施の形態の構成及び動作は例であって、本発明の主旨を逸脱しない範囲で適宜変更して実行できる。
【産業上の利用可能性】
【０１２５】
本発明は、保守の負荷を低減すると共に通信障害の発生を精度よく予測して、通信の信頼性を向上させることができる無線通信装置及び無線通信システムに適している。
【符号の説明】
【０１２６】
５，６...ネットワーク、  ８...分割ブロック、  １０，１１...無線通信装置、  １２...筐体、  １３...取り付け部、  １４...スコープ部、  １５，１５０...撮像部、  ２０...保守装置、  ３０...障害物、  １００，２００...制御部、  １１０，２１０...記憶部、  １２０...無線送受信部、  １３０...信号強度測定部、  １３５...同期検出部、  １４０，２４０...ネットワーク送受信部、  １６０...画像処理部、  １７０...レーザー出力部、  １８０...タイマー部、  ２２０...表示部、  ２３０...入力部、  ７０...監視領域、  ８０...分割監視領域
【図１】
2015182752.tif 000004
【図２】
2015182752.tif 000005
【図３】
2015182752.tif 000006
【図４】
2015182752.tif 000007
【図５】
2015182752.tif 000008
【図６】
2015182752.tif 000009
【図７】
2015182752.tif 000010
【図８】
2015182752.tif 000011
【図９】
2015182752.tif 000012
【図１０】
2015182752.tif 000013
【図１１】
2015182752.tif 000014
【図１２】
2015182752.tif 000015
【図１３】
2015182752.tif 000016
【図１４】
2015182752.tif 000017
【手続補正書】
【提出日】平成28年11月18日(2016.11.18)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
指向性アンテナを用いて相手装置と無線通信を行う無線通信装置であって、
前記指向性アンテナの電波方向と光軸が一致し、監視対象となる前記相手装置を含む領域の画像を撮像する撮像部と、
前記撮像部で撮像され、基準となる基準画像を記憶する記憶部と、
定期的に前記撮像部で撮像された撮像画像を取得して、正規化相互相関により前記撮像画像と前記基準画像の前記監視対象となる領域における類似度を算出し、重み付けした前記類似度に基づいて、前記監視対象となる領域の状態を示す指標値を算出して、前記指標値が特定の数値以下の場合に異常を検出して、前記異常が検出される状態が一定期間継続した場合に、前記撮像画像を含むアラート情報を出力する通信障害予測処理を行う制御部とを備え、
制御部が、監視対象となる領域として、相手装置を含む監視領域と、前記監視領域を拡張した拡張領域を複数に分割した分割ブロックとを設定しておき、通信障害予測処理において、前記監視領域及び前記各分割ブロックについて、撮像画像と基準画像との類似度を算出して、前記監視対象となる領域の状態を示す指標値として、前記監視領域及び前記分割ブロック毎の類似度を統合した統合指標値を算出し、前記統合指標値が予め設定された閾値以下となった場合に、異常を検出することを特徴とする無線通信装置。
【請求項２】
制御部が、通信障害予測処理において、各分割ブロックの重要度に応じて前記各分割ブロックの類似度に重み付けを行って、前記重み付けされた類似度に基づいて統合指標値を算出することを特徴とする請求項１記載の無線通信装置。
【請求項３】
記憶部が、撮像画像を記憶すると共に、前記撮像画像毎に各分割ブロックの特定期間の類似度を記憶しておき、
制御部が、通信障害予測処理において異常を検出した場合に、現在までの前記特定期間の各分割ブロックにおける類似度の変化傾向に基づいて異常の原因を推定し、前記推定される原因を示す情報をアラート情報に含めて出力することを特徴とする請求項１又は２記載の無線通信装置。
【請求項４】
互いに対向して設置された１対の無線通信装置を備えた無線通信システムであって、
前記無線通信装置が、請求項１乃至３のいずれか記載の無線通信装置であることを特徴とする無線通信システム。
【請求項５】
無線通信装置の制御部が、通信障害予測処理において異常を検出した場合に、相手装置における通信障害予測処理の処理結果を取得して、自装置における処理結果に前記相手装置における処理結果を加えて、前記異常の原因を推定することを特徴とする請求項４記載の無線通信システム。
【国際調査報告】
2015182752.tif 000018
2015182752.tif 000019
2015182752.tif 000020
2015182752.tif 000021