(57)【要約】【課題】利用者の撮影画像から魅力的な動画を簡易に作成できる動画作成装置等を提供する。【解決手段】写真撮影装置の制御装置は、利用者を撮影した複数の撮影画像のそれぞれから人物画像を抽出し、複数の人物画像を、複数のフレームのそれぞれに合成し、複数の合成画像を作成する。そして、合成画像を連続して再生する動画を作成し、サーバに送信する。サーバに格納された動画は、ユーザ端末からのアクセスに応じてダウンロードさせ、利用者が楽しむことが可能である。【選択図】図６
2019004236.tif 000002
【特許請求の範囲】
【請求項１】
利用者を撮影した複数の撮影画像のそれぞれから人物画像を抽出する抽出手段と、
複数の前記人物画像を、複数のフレームのそれぞれに合成し、複数の合成画像を作成する合成手段と、
複数の前記合成画像を連続して再生する動画を作成する動画作成手段と、
を有することを特徴とする動画作成装置。
【請求項２】
前記動画をサーバに送信する送信手段を有することを特徴とする請求項１記載の動画作成装置。
【請求項３】
前記合成手段は、前記人物画像を、予め定められた前記フレーム内の人物領域に合成することを特徴とする請求項１または請求項２記載の動画作成装置。
【請求項４】
コンピュータを、
利用者を撮影した複数の撮影画像のそれぞれから人物画像を抽出する抽出手段と、
複数の前記人物画像を、複数のフレームのそれぞれに合成し、複数の合成画像を作成する合成手段と、
複数の前記合成画像を連続して再生する動画を作成する動画作成手段と、
して機能させるためのプログラム。
【請求項５】
利用者を撮影する撮影部と、
請求項１から請求項３のいずれかに記載の動画作成装置と、
前記合成画像をプリントするプリンタと、
を有することを特徴とする写真撮影装置。
【請求項６】
撮影を行う間の利用者の人物画像を前記フレームに合成した合成画像を表示する表示部をさらに有することを特徴とする請求項５記載の写真撮影装置。
【請求項７】
請求項５または請求項６に記載の写真撮影装置と、
前記写真撮影装置から前記動画を受信し、前記利用者の端末に前記動画を送信するサーバと、
を有することを特徴とする写真撮影システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、利用者の撮影画像から動画を作成する動画作成装置、プログラム、写真撮影装置、および写真撮影システムに関する。
【背景技術】
【０００２】
利用者を撮影してその撮影画像をプリントする写真撮影装置は種々存在する。このような写真撮影装置では、利用者の撮影画像をサーバにアップロードし、利用者がその画像をダウンロードして楽しめる機能を有するものがある。
【０００３】
現在、このような写真撮影装置では利用者の興味を引くようなより魅力的な機能が求められている。そのため、特許文献１では、利用者の撮影画像を時間変化するテンプレート中の指定したフレームにはめ込むことで動画を作成する写真撮影装置が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許5896385号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１の動画は主にフレームが変化するものであり、各フレーム間で撮影画像の位置や向き、サイズを変えることはできるものの、その間使用する撮影画像自体は変わらず、複数のフレームで同じ撮影画像が用いられる。また、撮影画像をどのフレームにはめ込むか、どのように位置等を変えるかの設定も複雑であった。
【０００６】
本発明は上記の問題に鑑みてなされたものであり、利用者の撮影画像から魅力的な動画を簡易に作成できる動画作成装置等を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前述した課題を解決するための第１の発明は、利用者を撮影した複数の撮影画像のそれぞれから人物画像を抽出する抽出手段と、複数の前記人物画像を、複数のフレームのそれぞれに合成し、複数の合成画像を作成する合成手段と、複数の前記合成画像を連続して再生する動画を作成する動画作成手段と、を有することを特徴とする動画作成装置である。
【０００８】
本発明では、利用者を複数回撮影し、各回の撮影画像から抽出した複数の人物画像を複数のフレームのそれぞれに合成して合成画像を作成し、これらの合成画像をいわゆるパラパラ漫画のように動画化することで、人物画像が１枚のフレームごとに変化する魅力的な動画を作成することができる。例えば、フレームと各回の撮影時の利用者のポーズによってストーリー性のある動画を作成することが可能になる。また、撮影回数とフレームの枚数は対応しており、各回の撮影画像から得た人物画像はそのまま時系列順にフレームに合成できるので、人物画像をどのフレームにはめ込むかなどの指示も特に必要なく、簡易且つ手軽に動画を作成することができる。
【０００９】
前記動画作成装置は、前記動画をサーバに送信する送信手段を有することが望ましい。
これにより、動画をサーバで管理し、利用者にダウンロードさせることが可能になる。
【００１０】
前記合成手段は、前記人物画像を予め定められた前記フレーム内の人物領域に合成することが望ましい。
このように、本発明では人物画像の位置がフレーム内で予め決まっているため、フレームのどの位置に人物画像を合成するか等の指示も特に必要なく、手軽に動画を作成できる。
【００１１】
第２の発明は、コンピュータを、利用者を撮影した複数の撮影画像のそれぞれから人物画像を抽出する抽出手段と、複数の前記人物画像を、複数のフレームのそれぞれに合成し、複数の合成画像を作成する合成手段と、複数の前記合成画像を連続して再生する動画を作成する動画作成手段と、して機能させるためのプログラムである。
第２の発明は、コンピュータを第１の発明の動画作成装置として機能させるためのプログラムである。
【００１２】
第３の発明は、利用者を撮影する撮影部と、第１の発明の動画作成装置と、前記合成画像をプリントするプリンタと、を有することを特徴とする写真撮影装置である。
第３の発明は、第１の発明の動画作成装置を含む写真撮影装置である。この写真撮影装置では合成画像をシール等のプリント物としても出力できるので、動画の場合とは違った楽しみ方ができる。
【００１３】
前記写真撮影装置は、撮影を行う間の利用者の人物画像を前記フレームに合成した合成画像を表示する表示部をさらに有することが望ましい。
このようなプレビュー表示を行うことで、利用者がフレームに合わせたポーズを確認し、動画用の合成画像を作成するための本撮影に臨むことができる。
【００１４】
第４の発明は、第３の発明の写真撮影装置と、前記写真撮影装置から前記動画を受信し、前記利用者の端末に前記動画を送信するサーバと、を有することを特徴とする写真撮影システムである。
第４の発明は、第３の発明の写真撮影装置とサーバを含む写真撮影システムである。上記のように、動画作成装置で作成した動画はサーバ側で管理して利用者がダウンロードできるようにし、写真撮影装置における記憶部容量の圧迫を防ぐことができる。
【発明の効果】
【００１５】
本発明により、利用者の撮影画像から魅力的な動画を簡易に作成できる動画作成装置等を提供することができる。
【図面の簡単な説明】
【００１６】
【図１】写真撮影システム１を示す図。
【図２】写真撮影装置２の外観を示す図。
【図３】写真撮影装置２のシステム構成を示す図。
【図４】制御装置２０のハードウェア構成を示す図。
【図５】サーバ３のハードウェア構成を示す図。
【図６】写真撮影装置２の処理を示すフローチャート。
【図７】フレームセット７の例。
【図８】撮影画像８１と人物画像８２の例。
【図９】人物画像８２とフレーム７１の合成について説明する図。
【図１０】合成画像１０１〜１０４の作成について説明する図。
【図１１】動画１００を示す図。
【図１２】プリント物１１０の例。
【発明を実施するための形態】
【００１７】
以下、図面に基づいて本発明の好適な実施形態について詳細に説明する。
【００１８】
（１．写真撮影システム１）
図１は本発明の実施形態に係る写真撮影システム１を示す図である。図１に示すように、本実施形態の写真撮影システム１は、写真撮影装置２、サーバ３、およびユーザ端末５がネットワーク６を介して通信可能に接続された構成を有する。
【００１９】
写真撮影装置２は、利用者が自身の撮影を行うものである。図２は写真撮影装置２の外観を示す図であり、図３は写真撮影装置２のシステム構成を示す図である。
【００２０】
写真撮影装置２は利用者が中に入って撮影を行うボックス状の外観を有し、制御装置２０、表示部２１、課金部２２、撮影部２３、照明２４、プリンタ２５、プリント物取出口２７、背景板２８等を有する。背景板２８以外は、主に写真撮影装置２の前部（図２の左側に対応する）に設けられる。
【００２１】
制御装置２０は写真撮影装置２の内部に設けられ、写真撮影装置２の処理全体を制御する。特に本実施形態では、制御装置２０が、後述する手順により利用者の撮影画像から動画を作成する動画作成装置として機能する。
【００２２】
図４は制御装置２０のハードウェア構成を示す図である。図４に示すように、制御装置２０は、例えば制御部２０１、記憶部２０２、入力部２０３、通信制御部２０４等をバス等により接続して構成したコンピュータにより実現できる。但しこれに限ることなく、適宜様々な構成をとることができる。
【００２３】
制御部２０１はCPU、ROM、RAMなどから構成される。CPUは、記憶部２０２、ROMなどの記憶媒体に格納された制御装置２０の処理に係るプログラムをRAM上のワークエリアに呼び出して実行する。ROMは不揮発性メモリであり、ブートプログラムやBIOSなどのプログラム、データなどを恒久的に保持している。RAMは揮発性メモリであり、記憶部２０２、ROMなどからロードしたプログラムやデータを一時的に保持するとともに、制御部２０１が各種処理を行うために使用するワークエリアを備える。
【００２４】
記憶部２０２はハードディスクドライブやソリッドステートドライブ、フラッシュメモリ等であり、後述する処理に際し制御装置２０が実行するプログラム、プログラム実行に必要なデータ、OSなどが格納される。これらのプログラムやデータは、制御部２０１により必要に応じて読み出され実行される。本実施形態では、記憶部２０２に後述するフレームセット７等のデータが格納されている。
【００２５】
入力部２０３は制御装置２０に各種の設定入力を行うものである。
通信制御部２０４はネットワーク等を介した通信を媒介する通信インタフェースであり、サーバ３等との間で通信を行う。
【００２６】
図２、３の説明に戻る。表示部２１は、写真撮影装置２の入力部を兼ねたタッチパネル付ディスプレイ等により実現される。表示部２１は、利用者の操作・選択に係る各種の画面を表示し、画面上での利用者の指示入力等を受付ける。
【００２７】
課金部２２は、硬貨や紙幣の投入口、つり銭返却口、レシート取出口、レシートプリンタ等（不図示）を備え、利用者からの課金やレシートの発行を管理する。
【００２８】
撮影部２３は、撮影窓の内側にカメラ等を設けたものである。カメラには例えば高解像度のデジタルカメラが用いられるが、これに限ることはない。
【００２９】
照明２４は利用者を撮影する際の照明である。照明２４は例えば白色の光を照射する面光源であり、撮影部２３の上部に設けられるが、これに限ることはない。
【００３０】
プリンタ２５は、画像をプリントするものであり、写真撮影装置２の内部に設けられる。画像をプリントしたプリント物はプリント物取出口２７に排出される。プリンタ２５の方式や設置台数等は特に問わない。
【００３１】
背景板２８は、写真撮影装置２の後部（図２の右側に対応する）に設けられ、利用者の撮影時の背景となる。背景板２８は所定色のパネル等により構成される。
【００３２】
図１の説明に戻る。サーバ３は、写真撮影装置２から動画や画像を受信し、これらの動画や画像を管理するサーバである。
【００３３】
図５は、サーバ３のハードウェア構成の例を示す図である。図５に示すように、サーバ３は、例えば制御部３１、記憶部３２、表示部３３、入力部３４、通信制御部３５等をバス等により接続して構成したコンピュータにより実現できる。但しこれに限ることなく、適宜様々な構成をとることができる。
【００３４】
制御部３１、記憶部３２、入力部３４、通信制御部３５の機能は前記した制御部２０１、記憶部２０２、入力部２０３、通信制御部２０４と略同様である。また表示部３３は液晶パネルなどのディスプレイ装置を有する。
【００３５】
なお、記憶部３２はハードディスクドライブやソリッドステートドライブ等から構成され、後述する処理をサーバ３に実行させるためのプログラムが格納される。また入力部３４はキーボード、マウスなどのポインティングデバイス、テンキーなどの入力装置を有する。
【００３６】
図１の説明に戻る。ユーザ端末５は利用者の所持するコンピュータ端末であり、例えばスマートフォン、タブレット端末、パーソナルコンピュータなどを用いることができる。ユーザ端末５は上記と略同様の制御部、記憶部、表示部、通信制御部などのほか、カメラやマイク、スピーカー等を有する。
【００３７】
（２．写真撮影装置２が行う処理）
図６は、写真撮影装置２の処理を示すフローチャートである。図６の各ステップは、写真撮影装置２の制御装置２０が写真撮影装置２の各部における処理を実行することにより行われる。
【００３８】
本実施形態では、撮影を開始するにあたって、利用者が課金部２２にて課金を行う。写真撮影装置２は、利用者からの課金を受付ける（Ｓ１）と、表示部２１に操作案内画面（不図示）を表示して撮影に係る操作案内を行うとともに、フレームセット（テンプレート）の選択画面（不図示）を表示し、利用者の人物画像と合成するフレームセットの選択を受付ける（Ｓ２）。
【００３９】
図７はこのフレームセット７の例である。本実施形態では、フレームセット７が４つのフレーム（コマ）７１、７２、７３、７４から構成されており、フレーム７１からフレーム７４へと順に表示を行うと、恐竜が左側奥から右側手前に向かって襲いかかり、最後に倒されてひっくり返るといったストーリーが進行されるようになっている。ただしフレームセット７はこれに限らず、どのようなものでも構わない。前記したフレームセット７の選択画面においては、フレームセット７の全てのフレーム７１〜７４とその表示順が利用者にわかるように示される。
【００４０】
写真撮影装置２は、照明２４を点灯させ撮影部２３によって利用者の撮影を行い（Ｓ３）、制御装置２０が撮影画像における利用者の人物画像を抽出する（Ｓ４；抽出手段）。
【００４１】
図８の８１は撮影画像の例であり、８２は撮影画像から抽出した人物画像の例である。人物画像８２の抽出は、撮影画像８１から背景板２８の色の領域ａを除く領域を抽出することにより行うことができる。
【００４２】
次に、写真撮影装置２は、制御装置２０によって人物画像８２とフレームを合成し、合成画像を作成する（Ｓ５；合成手段）。
【００４３】
図９に示すように、本実施形態ではフレーム７１〜７４（図の例ではフレーム７１）について、利用者の人物画像８２を合成するための人物領域ｂが同じ位置に予め定められており、この人物領域ｂの位置やサイズに関する情報がフレームセット７に紐付けて記憶部２０２等に予め格納されている。Ｓ５では、この人物領域ｂの上に人物画像８２を重畳して合成することで、合成画像１０１が作成される。
【００４４】
本実施形態では、フレーム７１〜７４の数に合わせた回数分撮影を行うまで（Ｓ６；ＮＯ）、上記のＳ３〜Ｓ５の処理を繰り返す。この際、利用者はポーズを変えながら撮影を行い、図１０に示すように、前記の手順で作成した１枚目の合成画像１０１に続いて、２回目の撮影画像８１から抽出した人物画像８２を２つめのフレーム７２に合成した２枚目の合成画像１０２、３回目の撮影画像８１から抽出した人物画像８２を３つめのフレーム７３に合成した３枚目の合成画像１０３、４回目の撮影画像８１から抽出した人物画像８２を４つめのフレーム７４に合成した４枚目の合成画像１０４を作成する。本実施形態ではフレーム７１〜７４が４枚であり、撮影は４回行われるが、フレームは複数あればよく、その枚数は特に限定されない。利用者の撮影回数も、フレームの枚数に対応していれば特に限定されない。
【００４５】
また、本実施形態では、Ｓ３における撮影（本撮影）を行う間も動画として利用者を撮影し、当該動画の各フレームの画像から人物画像を抽出して、図１０の２１に示すように、その人物画像８２’を、次回の撮影画像中の人物画像８２に合成予定のフレーム（図の例ではフレーム７２）の人物領域ｂにＳ５と同様に合成し、その合成画像を表示部２１にプレビュー表示させる。これにより、利用者は当該フレームに合わせたポーズを取り、それを確認して本撮影に臨むことができる。
【００４６】
こうしてフレーム７１〜７４の数に合わせた回数分撮影を行うと撮影終了となり（Ｓ６；ＹＥＳ）、写真撮影装置２は、図１１に示すように、４枚の合成画像１０１〜１０４をこの順に連続して表示する動画１００を、gifアニメーションやmp4など動画を実現可能なデータフォーマットで作成する（Ｓ７；動画作成手段）。
【００４７】
写真撮影装置２はこの動画１００および各合成画像１０１〜１０４をサーバ３に送信し（Ｓ８；送信手段）、サーバ３は動画１００および各合成画像１０１〜１０４を受信して記憶部３２に格納する。なお、Ｓ８では、動画１００のみサーバ３に送信してもよい。
【００４８】
また、写真撮影装置２は、プリンタ２５にて各合成画像１０１〜１０４を紙等にプリントし（Ｓ９）、プリント物としてプリント物取出口２７に排出する。
【００４９】
図１２はプリント物１１０の例を示す図である。このプリント物１１０は、合成画像１０１〜１０４を縦横２列に並べてプリントしたものであり、各合成画像１０１〜１０４がシールとして剥がせるようになっている。
【００５０】
ただし、プリント物１１０はこれに限らない。例えば各合成画像１０１〜１０４を各ページに表示したフォトブックを作成してもよい。また、利用者の住所などをサーバ３に対し登録しておくと、合成画像１０１〜１０４がプリントされたフォトブックやTシャツ・マグカップなどのグッズが郵送等で利用者の元に届く、といった運用も可能である。
【００５１】
また、サーバ３に格納された動画１００や合成画像１０１〜１０４は、ユーザ端末５からのアクセスに応じてサーバ３からユーザ端末５に送信し、ユーザ端末５上で表示して楽しむことが可能である。そのため、課金部２２から排出されるレシートや上記のプリント物１１０には、動画１００や合成画像１０１〜１０４のダウンロードサイトにアクセスするためのアドレスや二次元コード等を印刷してもよい。また、AR(Augmented Reality;拡張現実)技術等を用い、ユーザ端末５で専用のアプリケーション等を起動しカメラによってプリント物１１０を読取ると、プリント物１１０に対応する動画１００がサーバ３からダウンロードされ、ユーザ端末５の表示部においてプリント物１１０上で再生される、といったことも可能である。
【００５２】
このように、本実施形態によれば、利用者を複数回撮影し、各回の撮影画像８１から抽出した複数の人物画像８２を複数のフレーム７１〜７４のそれぞれに合成して合成画像１０１〜１０４を作成し、これらの合成画像１０１〜１０４をいわゆるパラパラ漫画のように動画化することで、人物画像８２が１枚のフレームごとに変化する魅力的な動画１００を作成することができる。例えばフレーム７１〜７４と各回の撮影時の利用者のポーズによってストーリー性のある動画１００を作成することが可能になり、図１０、１１の例では襲い掛かってきた恐竜を利用者が撃退した、という動画１００が作成される。また、撮影回数とフレーム７１〜７４の枚数は対応しており、各回の撮影画像８１から得た人物画像８２はそのまま時系列順にフレーム７１〜７４に合成できるので、人物画像８２をどのフレームにはめ込むかなどの指示も特に必要なく、簡易且つ手軽に動画を作成することができる。
【００５３】
また、本実施形態では作成した動画１００をサーバ３に送信するので、動画１００をサーバ３側で管理して利用者がダウンロードできるようにし、写真撮影装置２における記憶部容量の圧迫を防ぐことができる。
【００５４】
また、本実施形態では人物画像８２の位置がフレーム７１〜７４内で予め決まっているため、フレーム７１〜７４のどの位置に人物画像８２を合成するか等の指示も特に必要なく、手軽に動画を作成できる。
【００５５】
また、本実施形態では合成画像１０１〜１０４をシール等のプリント物１１０としても出力できるので、動画１００の場合とは違った楽しみ方ができる。
【００５６】
さらに、本実施形態では、写真撮影装置２の表示部２１が、撮影を行う間の利用者の人物画像８２’をフレーム７１〜７４に合成した合成画像をプレビュー表示するので、利用者がフレーム７１〜７４に合わせたポーズを確認し、動画用の合成画像１０１〜１０４を作成するための本撮影に臨むことができる。
【００５７】
しかしながら、本発明はこれに限らない。例えば本実施形態ではフレーム７１〜７４の画像が互いに異なっているが、一部あるいは全てのフレーム７１〜７４が同じ画像であってもよい。利用者のポーズの違いのみによって動画１００にストーリーを持たせることも可能である。
【００５８】
また、本実施形態ではフレーム７１〜７４内の人物領域ｂが同じ位置にあるが、一部のフレームの人物領域ｂの位置が他のフレームにおける人物領域ｂの位置と異なっていてもよい。
【００５９】
さらに、表示部２１に表示される画像編集画面（不図示）において利用者がペンツール等で指示した線や、スタンプツール等で指定したスタンプ、利用者が入力したテキストなどを合成画像１０１〜１０４の上に前景として重畳する等の編集を行うことも可能である。
【００６０】
また、人物画像８２については、合成を行う際の前処理として、人物画像８２の画素の色をフレームの代表色（例えばフレームの画素間で色の平均値や中央値をとったもの）に近づける処理を行ってもよく、これにより合成時の違和感を低減することも可能である。なお、「色」とは色度（色相・彩度）と明度（輝度）を含む概念をいうものとし、各画素の輝度や色度は、例えば画素のRGB値を既知の手法でL*a*b*表色系の各値に変換して得ることができる。L*a*b*表色系では、L*によって輝度が、a*、b*によって色度が表される。
【００６１】
さらに、人物画像８２の輪郭部分の画素のα値（透過度）を100%未満且つ0%を超える値として輪郭部分を半透明化するなどして、合成時にフレーム７１〜７４となじむようにしてもよい。また人物画像８２の輝度分布をフレーム７１〜７４の輝度分布に基づいて補正し、人物画像８２の光の当たり方をフレーム７１〜７４における光の当たり方に合わせることで、合成画像１０１〜１０４における違和感を低減することも可能である。
【００６２】
また、前記のＳ７において合成画像１０１〜１０４を写真撮影装置２からサーバ３に送信し、サーバ３によって動画１００の作成を行うことも可能であり、この場合は写真撮影装置２の制御装置２０とサーバ３によって動画作成装置が構成されることになる。
【００６３】
以上、添付図面を参照して、本発明の好適な実施形態について説明したが、本発明は係る例に限定されない。当業者であれば、本願で開示した技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【００６４】
１：写真撮影システム
２：写真撮影装置
３：サーバ
５：ユーザ端末
６：ネットワーク
７：フレームセット
２０：制御装置
２１：表示部
２２：課金部
２３：撮影部
２４：照明
２５：プリンタ
２７：プリント物取出口
２８：背景板
７１、７２、７３、７４：フレーム
８１：撮影画像
８２、８２’：人物画像
１００：動画
１０１、１０２、１０３、１０４：合成画像
１１０：プリント物
【図１】
2019004236.tif 000003
【図２】
2019004236.tif 000004
【図３】
2019004236.tif 000005
【図４】
2019004236.tif 000006
【図５】
2019004236.tif 000007
【図６】
2019004236.tif 000008
【図７】
2019004236.tif 000009
【図８】
2019004236.tif 000010
【図９】
2019004236.tif 000011
【図１０】
2019004236.tif 000012
【図１１】
2019004236.tif 000013
【図１２】
2019004236.tif 000014