(57)【要約】【課題】重要な瞬間を記録することができる撮像装置、画像記録装置、および撮像方法を提供すること。【解決手段】本開示に係る撮像装置は、撮像部と、変更部とを有する。撮像部は、周囲の画像を撮像して画像データを生成する。変更部は、画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、撮像部に撮像させる画像のフレームレートを変更する。【選択図】図１
2020136900.tif 000002
【特許請求の範囲】
【請求項１】
周囲の画像を撮像して画像データを生成する撮像部と、
前記画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、前記撮像部に撮像させる画像のフレームレートを変更する変更部と
を有する撮像装置。
【請求項２】
前記変更部は、
前記可能性が高いほど前記フレームレートを高める
請求項１に記載の撮像装置。
【請求項３】
前記変更部は、
前記可能性に応じて前記撮像部に撮像させる画像の解像度を変更する
請求項１に記載の撮像装置。
【請求項４】
前記変更部は、
前記可能性が高いほど前記解像度を高める
請求項３に記載の撮像装置。
【請求項５】
前記画像データに基づいて前記所定の事象が発生する可能性の高さを予測する予測部
を有する請求項１に記載の撮像装置。
【請求項６】
前記予測部は、
ＤＮＮ（Deep  Neural  Network）を使用するＤＮＮ処理によって前記可能性の高さを予測する
請求項５に記載の撮像装置。
【請求項７】
前記予測部は、
事故が発生する可能性の高さを予測する
請求項５に記載の撮像装置。
【請求項８】
前記周囲の照度を検出する照度検出部
を有し、
前記変更部は、
前記照度検出部によって検出される前記照度に応じて前記フレームレートの変更範囲を決定する
請求項１に記載の撮像装置。
【請求項９】
前記撮像部は、
前記変更部によって変更される前記フレームレートに応じて前記画像データにおける撮像画像の輝度データを調整する
請求項１に記載の撮像装置。
【請求項１０】
周囲の画像を撮像して画像データを生成する撮像部と、
前記画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、前記撮像部に撮像させる画像のフレームレートを変更する変更部と
を有する撮像装置と、
前記撮像装置によって撮像される画像を記録する記録部と
を有する画像記録装置。
【請求項１１】
周囲の画像を撮像して画像データを生成し、
前記画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、撮像する画像のフレームレートを変更する
撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、撮像装置、画像記録装置、および撮像方法に関する。
【背景技術】
【０００２】
車両に搭載されて車両の周囲の画像を撮像し、撮像画像の画像データをメモリに記憶することによって、例えば、自動車事故発生時の状況を記録可能としたドライブレコーダがある。ドライブレコーダは、画像を撮像するフレームレートを比較的低く設定すると、長時間の画像を記録することができるが、事故発生時の重要な瞬間が記録できていない場合がある。
【０００３】
一方、ドライブレコーダは、フレームレートを比較的高く設定すると、事故発生時の重要な瞬間を逃さずに記録することができるが、画像データを記憶するメモリの容量に上限があるため、事故発生前後の画像を消去して記録に残すことができない場合がある。
【０００４】
このため、例えば、外部から入力される各種情報に基づいて車両の運転状態を判定し、判定結果に応じて、フレームレートを変更する車両用映像処理装置がある（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−２１４７６９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記の従来技術では、重要な瞬間を記録することができない場合がある。そこで、本開示では、重要な瞬間を記録することができる撮像装置、画像記録装置、および撮像方法を提案する。
【課題を解決するための手段】
【０００７】
本開示に係る撮像装置は、撮像部と、変更部とを有する。撮像部は、周囲の画像を撮像して画像データを生成する。変更部は、前記画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、前記撮像部に撮像させる画像のフレームレートを変更する。
【図面の簡単な説明】
【０００８】
【図１】本開示に係る画像記録装置の概略構成例を示すブロック図である。
【図２】本開示に係る事故予測スコアとフレームレートおよび解像度の関係を示す説明図である。
【図３】本開示に係る照度とフレームレートの上限との関係を示す説明図である。
【図４】本開示に係るフレームレートと撮像画像の輝度との関係を示す説明図である。
【図５】本開示に係るＣＩＳの動作説明図である。
【図６】本開示に係るＣＩＳが実行する処理の一例を示すフローチャートである。
【発明を実施するための形態】
【０００９】
以下に、本開示の実施形態について図面に基づいて詳細に説明する。なお、以下の実施形態において、同一の部位には同一の符号を付することにより重複する説明を省略する。以下では、本開示に係る画像記録装置が車両に搭載されるドライブレコーダである場合について説明するが、画像記録装置はドライブレコーダに限定されるものではない。
【００１０】
本開示に係る画像記録装置は、例えば、オートバイ、自転車、電動車イス、およびドローン等、任意の移動体に搭載されて周囲の画像を撮像して記録することもできる。また、本開示に係る画像記録装置は、例えば、野鳥や野生動物を観察するカメラ、街頭や建物、施設等に設置される監視カメラとして使用することもできる。
【００１１】
［１．画像記録装置の構成］
図１は、本開示に係る画像記録装置の概略構成を示すブロック図である。図１に示すように、画像記録装置１は、ＣＭＯＳ（Complementary  Metal  Oxide  Semiconductor）イメージセンサ（以下、ＣＩＳ２と記載する）と、アプリケーションプロセッサ（以下、ＡＰ３と記載する）と、記録媒体４とを備える。
【００１２】
ＣＩＳ２は、１チップで構成され、車両の前方、側方、または後方等の周囲を撮像する撮像装置の一例であり、撮像画像の画像データをＡＰ３へ出力する。なお、本開示に係る撮像装置は、ＣＩＳ２に限定されるものではなく、例えば、ＣＣＤ（Charge  Coupled  Device）イメージセンサ等、他のイメージセンサであってもよい。
【００１３】
ＡＰ３は、画像記録装置１の用途に応じた各種アプリケーションプログラムを実行するＣＰＵ（Central  Processing  Unit）等のプロセッサの一例であるＡＰ制御部３１と、ＣＩＳ２との間で情報通信を行う通信Ｉ／Ｆ（インターフェイス）３２とを備える。
【００１４】
ＡＰ制御部３１は、例えば、通信Ｉ／Ｆ３２を介してＣＩＳ２から入力される画像データの補正処理や加工処理を行う他、通信Ｉ／Ｆ３２を介して記録媒体４への画像データの書き込みおよび消去等を行う。ＡＰ制御部３１は、最新の画像データを記録媒体４へ書き込み、記録容量の上限に達した場合には、最も古い画像データから順に最新の画像データを上書きする。
【００１５】
記録媒体４は、ＣＩＳ２によって撮像される画像を記憶する記録部の一例であり、例えば、ＳＤメモリカード等の着脱可能な記録デバイスである。記録媒体４は、直近の所定時間（例えば、１時間）に撮像された撮像画像の画像データを記録する。記録媒体４が記録可能な映像の時間は、画像が撮像されるフレームレートや画像の解像度によって変化する。
【００１６】
記録媒体４は、撮像画像のフレームレートや解像度が比較的低い場合には、記録可能な映像の時間を延長することはできるが、事故発生時の重要な瞬間を記録することができない場合がある。例えば、記録媒体４は、撮像される画像のフレーム間に事故が発生した場合、事故発生の瞬間の画像を記録することができない。
【００１７】
また、記録媒体４は、撮像画像のフレームレートや解像度が比較的高い場合には、事故発生の瞬間を記録することはできるが、撮像可能な映像の時間が短くなるため、事故発生前後の画像が消去され、記録に残すことができない場合がある。
【００１８】
例えば、記録媒体４は、１時間以上前から続くあおり運転が原因で事故が発生した場合、事故発生の瞬間の画像を記録できていても、事故の原因となったあおり運転の画像が消去されて記録に残すことができない。
【００１９】
このため、例えば、カーナビゲーション装置や障害物検出装置等の外部装置から収集する各種情報に基づいて判定する車両の運転状態に応じてフレームレートや解像度を変更することも行われているが、それでも、重要な瞬間を記録することができない場合がある。
【００２０】
例えば、記録媒体４は、外部からの情報収集が開始されてからフレームレートを変更するまでに時間が掛かり、事故が発生する前までにフレームレートを高める変更が間に合わない場合、事故発生の瞬間の画像を記録することができないことがある。
【００２１】
そこで、本開示に係るＣＩＳ２は、重要な瞬間を記録可能とする構成を備える。具体的には、ＣＩＳ２は、撮像部５と、通信Ｉ／Ｆ（インターフェイス）６と、予測部７と、変更部８と、照度検出部９とを備える。
【００２２】
撮像部５は、受光部５１と、読出部５２とを備える。受光部５１は、例えば、ズームレンズ、フォーカスレンズ、絞り等を備える光学系と、フォトダイオードなどの受光素子を含む単位画素が２次元マトリクス状に配列された画素アレイ部とを備える。
【００２３】
受光部５１は、外部から入射する光を光学系によって画素アレイ部の受光面に結像する。画素アレイ部の各単位画素は、受光素子に入射した光を光電変換することで、入射光の光量に応じた電荷を読出可能に蓄積する。
【００２４】
読出部５２は、各単位画素に蓄積された電荷を画素信号として読み出す読出回路と、読出回路によって読み出されたアナログの画素信号をデジタル値に変換することで、デジタルの画像データを生成するＡＤＣ（Analog  to  Digital  Converter）とを備える。読出部５２は、生成した画像データを通信Ｉ／Ｆ６と予測部７とへ出力する。
【００２５】
通信Ｉ／Ｆ６は、撮像部５から入力される画像データをＡＰ３へ出力する。また、通信／Ｆ６は、後述するＤＮＮ（Deep  Neural  Network）をＡＰ３から取得して予測部７へ出力する。
【００２６】
予測部７は、例えば、ＣＰＵ（Central  Processing  Unit）、ＲＯＭ（Read  Only  Memory）、ＲＡＭ（Random  Access  Memory）などを有するマイクロコンピュータや各種の回路を含む。
【００２７】
予測部７は、ＣＰＵがＲＯＭに記憶されたプログラムを、ＲＡＭを作業領域として使用して実行することにより、撮像部５から入力される画像データに基づいて所定の事象が発生する可能性の高さを予測する。例えば、予測部７は、画像記録装置１が搭載された車両が車両事故に遭う（事故が発生する）可能性の高さを予測する。
【００２８】
なお、予測部７は、一部または全部がＡＳＩＣ（Application  Specific  Integrated  Circuit）やＦＰＧＡ（Field  Programmable  Gate  Array）等のハードウェアで構成されてもよい。
【００２９】
予測部７は、例えば、ＤＮＮを使用するＤＮＮ処理によって事故が発生する可能性の高さを示す事故予測スコアを算出する。ＤＮＮは、実際の事故発生前に撮像された多数の画像の画像データと、撮像後に事故が発生しなかった多数の画像の画像データを教師データとして使用した機械学習によって事前に生成される。
【００３０】
予測部７は、通信Ｉ／Ｆ６を介してＡＰ３から取得するＤＮＮを使用し、撮像部５から入力される画像データについてＤＮＮ処理を行うことによって事故予測スコアを算出し、事故予測スコアを変更部８へ出力する。事故予測スコアは、値が高いほど事故が発生する可能性が高いことを示すものとする。なお、ＤＮＮは、予め予測部７が記憶しておいてもよい。
【００３１】
予測部７は、例えば、車両の周囲に人がいる場合や、車両が交差点に近付いた場合、先行車両や後続車両との車間距離が近くなった場合等に、事故が発生する可能性が高いと予測する。このとき、予測部７は、車両の周囲にいる人までの距離、交差点までの距離、他車両との車間距離が短くなるほど高い事故予測スコアを算出する。
【００３２】
なお、予測部７は、ＤＮＮに限らず、ＲＮＮ（Recurrent  Neural  Networks）やＣＮＮ（Convolutional  Neural  Network）など様々なニューラルネットワークを用いて事故予測スコアを算出することができる。また、予測部７は、決定木やサポートベクタマシンなどの他の様々な機械学習で学習した学習モデルを用いて事故予測スコアを算出する構成であってもよい。
【００３３】
変更部８は、予測部７から入力される事故予測スコアに応じて撮像部５に撮像させる画像のフレームレートおよび解像度を決定し、決定したフレームレートおよび解像度を設定する情報を撮像部５へ出力することによってフレームレートおよび解像度を変更する。
【００３４】
図２は、本開示に係る事故予測スコアとフレームレートおよび解像度との関係を示す説明図である。図２に示すように、変更部８は、事故予測スコアが高いほどフレームレートおよび解像度を高くするように変更する。
【００３５】
なお、変更部８は、フレームレートおよび解像度を高めた後に、予測部７から入力される事故予測スコアの値が低下した場合には、フレームレートおよび解像度を低くするように変更する。
【００３６】
なお、ここでは、変更部８が事故予測スコアに応じて、フレームレートおよび解像度を変更したが、変更部８は、フレームレートおよび解像度のうち、少なくともいずれか一方を事故予測スコアに応じて変更することもできる。
【００３７】
これにより、撮像部５は、事故が発生する可能性が高くなるほど、画像を撮像する時間間隔を短くするので、例えば、事故発生の瞬間等の事故発生時に重要となる瞬間の画像を撮像することができる。また、撮像部５は、事故が発生する可能性が高くなるほど、撮像画像の解像度を高めるので、事故発生時に重要となる事故発生の瞬間の高精細な画像を撮像することができる。
【００３８】
ここで、変更部８は、例えば、夜間で周囲が暗い状況で事故予測スコアが高くなった場合に、フレームレートを高くし過ぎると露光時間が短くなり、撮像画像全体が暗くなる所謂黒つぶれ等の弊害が生じる。
【００３９】
そこで、照度検出部９は、車両の周囲の照度を検出し、検出した照度を示す情報を変更部８へ出力する。変更部８は、照度検出部９から入力される照度を示す情報に基づき、周囲の照度に応じてフレームレートの変更範囲を決定する。
【００４０】
図３は、本開示に係る照度とフレームレートの上限との関係を示す説明図である。図３に示すように、変更部８は、車両の周囲の照度が低くなるほど、変更するフレームレートの上限を低くする決定を行う。これにより、変更部８は、夜間の撮像画像に黒つぶれが生じることを防止することができる。
【００４１】
また、撮像部５の読出部５２は、変更部８によって変更されるフレームレートに応じて撮像画像の輝度データを調整する。変更部８は、撮像画像の輝度データを増幅する増幅器のゲインを変更することによって、撮像画像の輝度を調整する。
【００４２】
図４は、本開示に係るフレームレートと撮像画像の輝度との関係を示す説明図である。図４に示すように、読出部５２は、フレームレートが高くなるほど、撮像画像の輝度を高くする調整を行う。これにより、フレームレートが高くなることによる撮像画像の黒つぶれの発生を防止することができる。
【００４３】
なお、ここでは、変更部８によるフレームレートの上限の変更、および読出部５２による撮像画像の輝度調整を行う場合について説明したが、フレームレートの上限の変更と撮像画像の輝度調整とのうち、少なくともいずれか一方を行ってもよい。
【００４４】
このように、画像記録装置１では、ＣＩＳ２の内部で予測部７が撮像部５によって撮像される画像データに基づいて事故が発生する可能性の高さを予測し、変更部８が予測された事故が発生する高さに応じて撮像画像のフレームレートおよび解像度を変更する。かかる画像記録装置１は、事故の発生を予測するために、外部から情報を収集する時間を必要としない。
【００４５】
これにより、画像記録装置１は、例えば、外部から収集する各種情報に基づいて事故の発生を予測してフレームを変更する装置に比べて、遅延なくフレームレートを変更することができる。したがって、画像記録装置１は、例えば、事故発生時に、重要な事故発生の瞬間の画像を記録することができる。
【００４６】
［２．ＣＩＳの動作例］
次に、図５を参照し、ＣＩＳ２動作例について説明する。ここでは、ＣＩＳ２の動作による効果を明確にするため、３つの対比例を説明した後に、ＣＩＳ２の動作を説明する。図５は、本開示に係るＣＩＳの動作説明図である。
【００４７】
図５には、３つの対比例として、低フレームレート固定の場合、高フレームレート固定の場合、外部情報に基づく可変フレームレートの場合の撮像動作を示し、ＣＩＳ２の動作例として、画像データに基づく可変フレームレートの場合の撮像動作を示している。
【００４８】
また、ここでは、例えば、時刻ｔ１から先行車両が後続車両からあおり運転の被害を受け、その後、時刻ｔ３で衝突事故が発生する場合を例に挙げて説明する。図５に示すように、低フレームレート固定の場合、画像を撮像する時間間隔が長く、撮像画像の枚数も少ないため、画像データのデータ量が小さくなり、その分、撮像可能な時間が長くなる。
【００４９】
しかし、低フレームレート固定の場合、例えば、あおり運転のように継続的に行われる事象の画像を時刻ｔ１で撮像することができても、時刻ｔ３で事故が発生したときに、その一瞬の事象を撮像することができないことがある。
【００５０】
一方、高フレームレート固定の場合、画像を撮像する時間間隔が短いため、時刻ｔ３で事故発生の瞬間の画像を撮像することができる。しかし、高フレームレート固定の場合、撮像画像の枚数が記録容量の上限に達するまでの時間が低フレームレート固定場合よりも短いので、例えば、時刻ｔ１で撮像した事故原因となるあおり運転中の画像を消去することがある。
【００５１】
また、外部情報に基づく可変フレームレートの場合、例えば、外部から収集する外部情報に基づいて事故の発生を予測した場合に、低フレームレートから高フレームレートに変更することができる。
【００５２】
しかし、外部情報に基づく可変フレームレートの場合、外部情報を収集するために、外部装置との間で通信を行う必要があり、また、複数の外部情報に基づいて事故を予測する必要があるため、かかる通信および予測に時間が掛かる。
【００５３】
そのため、外部情報に基づく可変フレームレートの場合には、事故が発生する時刻ｔ３までに低フレームレートから高フレームレートに変更することができない場合がある。かかる場合、例えば、事故発生後の時刻ｔ４から高フレームレートでの撮像が開始され、時刻ｔ３で事故発生の瞬間の画像を撮像できないことがある。
【００５４】
これに対して、ＣＩＳ２は、撮像した画像データに基づく可変フレームレートで撮像を行う。このため、ＣＩＳ２は、外部装置から情報を収集する必要がないので、画像データから事故の発生を予測した場合に、外部情報に基づく可変フレームレートの場合よりも短時間で、低フレームレートから高フレームレートへの変更を行うことができる。
【００５５】
したがって、ＣＩＳ２は、例えば、平常時には低フレームレートで撮像を行うことで、画像データの記録時間を延長しつつ、時刻ｔ１であおり運転中の画像から事故の発生を予測した場合、事故発生前の時刻ｔ２で高フレームレートに変更することができる。
【００５６】
これにより、ＣＩＳ２は、例えば、事故の原因となるあおり運転中の画像、および事故発生の瞬間の画像の双方を撮像してＡＰ３へ出力することによって、記録媒体４に記録させることができる。
【００５７】
［３．ＣＩＳが実行する処理］
次に、図６を参照し、ＣＩＳ２が実行する処理について説明する。図６は、本開示に係るＣＩＳが実行する処理の一例を示すフローチャートである。ＣＩＳ２は、車両の電源がＯＮにされると、図６に示す処理を実行する。
【００５８】
具体的には、図６に示すように、ＣＩＳ２は、まず、ＡＰ３から学習済のＤＮＮを取得する（ステップＳ１０１）。続いて、ＣＩＳ２は、画像を撮像してＡＰ３へ出力する（ステップＳ１０２）。その後、ＣＩＳ２は、周囲の照度を検出し（ステップＳ１０３）、照度に応じてフレームレートの変更範囲を決定する（ステップＳ１０４）。
【００５９】
続いて、ＣＩＳ２は、ＤＮＮによる事故予測スコアを算出し（ステップＳ１０５）、事故予測スコアに基づいて、撮像画像のフレームレートおよび解像度を変更するか否かを判定する（ステップＳ１０６）。
【００６０】
そして、ＣＩＳ２は、変更しないと判定した場合（ステップＳ１０６，Ｎｏ）、処理をステップＳ１０２へ移す。また、ＣＩＳ２は、変更すると判定した場合（ステップＳ１０５，Ｙｅｓ）、事故予測スコアに応じて、フレームレートおよび解像度を変更する（ステップＳ１０７）。
【００６１】
続いて、ＣＩＳ２は、変更したフレームレートに応じて撮像画像の輝度データを調整し（ステップＳ１０８）、処理をステップＳ１０２へ移す。その後、ＣＩＳ２は、車両の電源がＯＦＦにされるまで、ステップＳ１０２〜ステップＳ１０８の処理を繰り返し実行する。
【００６２】
［４．その他の実施形態］
上述した実施形態に係る処理は、上記した実施形態以外にも種々の異なる形態にて実施されてよい。画像記録装置１は、車両以外に設けられてもよい。
【００６３】
例えば、画像記録装置１は、ドローンに設けられてもよい。かかる場合、ＣＩＳ２は、例えば、撮像目的の対象物を発見した場合に、フレームレートおよび解像度を高める。例えば、野鳥観察を目的として飛行中のドローンの場合、ＣＩＳ２は、画像内に鳥を発見した場合に、フレームレートおよび解像度を高める。これにより、画像記録装置１は、撮像目的の対象物の決定的瞬間を撮像することができる。
【００６４】
また、ＣＩＳ２は、撮像目的が鳥でない場合、急に画像フレームに入ってきた障害物を検知してフレームレートおよび解像度を高める。これにより、画像記録装置１は、例えば、突然、横から飛んできた鳥がドローンに衝突して墜落した場合に、墜落の原因が鳥であったことを記録に残すことができる。このとき、画像記録装置１は、上述したように、事故の予測後、迅速にフレームレートおよび解像度を変更するので、急に画像フレームに入り込んできた物も確実に撮像して記録に残すことができる。
【００６５】
また、ＣＩＳ２は、例えば、風等の外的要因で、ドローンの操縦者の意図とは異なる方向に移動したことを画像から検知した場合、即座にフレームレートおよび解像度を高めることにより、墜落等の事故の瞬間を確実に記録に残すことができる。
【００６６】
また、画像記録装置１は、例えば、工場に設置されてもよい。かかる場合、ＣＩＳ２は、例えば、工場で稼働するロボットや危険物の近くに人が近づいたときに、フレームレートおよび解像度を高める。これにより、画像記録装置１は、工場で発生する人身事故の状況を記録に残すことができる。
【００６７】
なお、上述した実施形態では、ＣＩＳ２が予測部７を備える場合について説明したが、予測部７は、ＡＰ３側に設けられてもよい。かかる場合、ＣＩＳ２は、撮像画像の画像データをＡＰ３へ出力し、ＡＰ３に設けられる予測部７によって算出される事故予測スコアをＡＰ３から取得し、上述した手順と同様の手順により、フレームレートおよび解像度の変更を行う。
【００６８】
ただし、予測部７がＡＰ３側に設けられる場合には、画像データをＡＰ３へ送信する時間と、事故予測スコアをＡＰ３から取得する時間が掛かるため、予測部７は、ＣＩＳ２側に設けられることが望ましい。
【００６９】
また、上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。また、実施例で説明した具体例、分布、数値などは、あくまで一例であり、任意に変更することができる。
【００７０】
また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。例えば、図１に示した予測部７と変更部８とは統合されてもよい。
【００７１】
また、上述してきた実施形態及び変形例は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。
【００７２】
［５．効果］
ＣＩＳ２は、撮像部５と、変更部８とを有する。撮像部５は、周囲の画像を撮像して画像データを生成する。変更部８は、画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、撮像部５に撮像させる画像のフレームレートを変更する。これにより、ＣＩＳ２は、重要な瞬間を記録することができる。
【００７３】
変更部８は、所定の事象が発生する可能性が高いほどフレームレートを高める。これにより、ＣＩＳ２は、所定の事象が発生する可能性が高いほど、その事象が発生する瞬間を逃すことなく記録に残すことができる。
【００７４】
変更部８は、所定の事象が発生する可能性に応じて撮像部撮像させる画像の解像度を変更する。これにより、ＣＩＳ２は、例えば、所定の事象が発生する可能性の高さに応じて、画像データのデータ量を変更することで、撮像可能時間を調整することができる。
【００７５】
変更部８は、所定の事象が発生する可能性が高いほど解像度を高める。所定の事象が発生する可能性が高いほど、その事象を高精細な画像で記録することができる。
【００７６】
ＣＩＳ２は、画像データに基づいて所定の事象が発生する可能性の高さを予測する予測部７を有する。これにより、ＣＩＳ２は、予測部７がＣＩＳ２の外部に設けられる場合よりも、迅速にフレームレートや解像度を変更することができる。
【００７７】
予測部７は、ＤＮＮを使用するＤＮＮ処理によって所定の事象が発生する可能性の高さを予測する。これにより、予測部７は、所定の事象が発生する正確な可能性の高さを予測することができる。
【００７８】
予測部７は、事故が発生する可能性の高さを予測する。これによりＣＩＳ２は、フレームレートが固定の場合に比べて、確実に事故の全貌および事故発生の瞬間を記録に残すことができる。
【００７９】
ＣＩＳ２は、周囲の照度を検出する照度検出部９を有する。変更部８は、照度検出部９によって検出される照度に応じてフレームレートの変更範囲を決定する。これにより、ＣＩＳ２は、例えば、照度が低くなるほどフレームレートの上限を低くすることで、撮像画像に黒つぶれが生じることを防止することができる。
【００８０】
撮像部５は、変更部８によって変更されるフレームレートに応じて画像データにおける撮像画像の輝度データを調整する。これにより、ＣＩＳ２は、例えば、フレームレートが高くなるほど、撮像画像の輝度を高めることで、フレームレートが変化しても撮像画像の視覚上の違和感のない画像を撮像することができる。
【００８１】
画像記録装置は、ＣＩＳ２と、記録部とを有する。ＣＩＳ２は、撮像部５と、変更部８とを有する。撮像部５は、周囲の画像を撮像して画像データを生成する。変更部８は、画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、撮像部５に撮像させる画像のフレームレートを変更する。記録媒体４は、ＣＩＳ２によって撮像される画像を記録する。これにより、画像記録装置は、重要な瞬間を記録することができる。
【００８２】
本開示に係る撮像方法は、周囲の画像を撮像して画像データを生成し、画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、撮像する画像のフレームレートを変更する。これにより、重要な瞬間を記録することができる。
【００８３】
なお、本明細書に記載された効果はあくまで例示であって限定されるものでは無く、また他の効果があってもよい。
【００８４】
なお、本技術は以下のような構成も取ることができる。
（１）
周囲の画像を撮像して画像データを生成する撮像部と、
前記画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、前記撮像部に撮像させる画像のフレームレートを変更する変更部と
を有する撮像装置。
（２）
前記変更部は、
前記可能性が高いほど前記フレームレートを高める
前記（１）に記載の撮像装置。
（３）
前記変更部は、
前記可能性に応じて前記撮像部撮像させる画像の解像度を変更する
前記（１）または（３）に記載の撮像装置。
（４）
前記変更部は、
前記可能性が高いほど前記解像度を高める
前記（３）に記載の撮像装置。
（５）
前記画像データに基づいて前記所定の事象が発生する可能性の高さを予測する予測部
を有する前記（１）〜（４）のいずれかに記載の撮像装置。
（６）
前記予測部は、
ＤＮＮ（Deep  Neural  Network）を使用するＤＮＮ処理によって前記可能性の高さを予測する
前記（５）に記載の撮像装置。
（７）
前記予測部は、
事故が発生する可能性の高さを予測する
前記（５）または（６）に記載の撮像装置。
（８）
前記周囲の照度を検出する照度検出部
を有し、
前記変更部は、
前記照度検出部によって検出される前記照度に応じて前記フレームレートの変更範囲を決定する
前記（１）〜（７）のいずれかに記載の撮像装置。
（９）
前記撮像部は、
前記変更部によって変更される前記フレームレートに応じて前記画像データにおける撮像画像の輝度データを調整する
前記（１）〜（８）のいずれかに記載の撮像装置。
（１０）
周囲の画像を撮像して画像データを生成する撮像部と、
前記画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、前記撮像部に撮像させる画像のフレームレートを変更する変更部と
を有する撮像装置と、
前記撮像装置によって撮像される画像を記録する記録部と
を有する画像記録装置。
（１１）
周囲の画像を撮像して画像データを生成し、
前記画像データに基づいて予測される所定の事象が発生する可能性の高さに応じて、撮像する画像のフレームレートを変更する
撮像方法。
【符号の説明】
【００８５】
１  画像記録装置
２  ＣＩＳ
３  ＡＰ
３１  ＡＰ制御部
３２  通信Ｉ／Ｆ
４  記録媒体
５  撮像部
５１  受光部
５２  読出部
６  通信Ｉ／Ｆ
７  予測部
８  変更部
９  照度検出部
【図１】
2020136900.tif 000003
【図２】
2020136900.tif 000004
【図３】
2020136900.tif 000005
【図４】
2020136900.tif 000006
【図５】
2020136900.tif 000007
【図６】
2020136900.tif 000008