"課金条件が記載された情報からなるタグを備えた課金タグ付き電子広告データを生成する広告主側コンピュータと、画面の前方の情況を入力データとして取り込む電子機器を備えた多数の会員側端末コンピュータと、前記課金タグ付き電子広告データを受信し、前記課金条件の中、集計部分を削除した修正課金タグを生成する広告代理店側統括コンピュータとがインターネットを介して接続し、前記広告代理店側統括コンピュータのコントロール下で、前記広告主側コンピュータから出力された電子広告データが、これに修正課金タグが付加されて前記会員側端末コンピュータに送信され、該電子広告データが会員側端末コンピュータの画面に表示されるようにしたシステムであって、前記会員側端末コンピュータは、前記電子広告データを処理する広告データ受信処理プログラムを内蔵し、該プログラムは、受信した電子広告データの修正課金条件が達成されたか否かを前記電子機器からの入力データを解析して判断する入力映像解析手段を有し、前記広告代理店側統括コンピュータに内蔵されたプログラムは、前記会員側端末コンピュータから送信された修正課金条件判断データを集計し電子広告データの課金条件が達成されたか否かを判断するプログラムを有し、前記課金条件が達成されたとき、前記広告主側コンピュータに処理させるための課金請求データを生成するようにしたことを特徴とする課金電子広告システム。前記課金タグ付き電子広告データを作成するためのプログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該ウエブサイトから前記課金タグ付き電子広告データ作成プログラムが前記広告主側コンピュータにダウンロードされるようにしたことを特徴とする請求項1に記載の課金電子広告システム。前記課金請求データを処理し、該データに記載された課金を精算する課金請求データ精算プログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該プログラムが前記ウエブサイトから前記広告主側コンピュータにダウンロードされるようにしたことを特徴とする請求項1に記載の課金電子広告システム。前記入力映像解析手段を有する修正課金タグ付き広告データを処理する広告データ受信処理プログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該ウエブサイトから前記広告データ受信処理プログラムが前記会員側端末コンピュータにダウンロードされるようにしたことを特徴とする請求項1に記載の課金電子広告システム。前記会員側端末コンピュータは、前記広告代理店側統括コンピュータのウエブサイトの会員リストデータベースに登録されていることを特徴とする請求項1に記載の課金電子広告システム。前記課金条件が、前記会員側端末コンピュータの電子広告データ表示画面に対する該コンピュータ所有者の注視時間が所定時間以上であり、該注視時間を満足する会員側端末コンピュータ数が所定数を超えるということを内容とすることを特徴とする請求項1に記載の課金電子広告システム。前記修正課金条件が、前記会員側端末コンピュータの電子広告データ表示画面に対する該コンピュータ所有者の注視時間が所定時間以上であることを内容とすることを特徴とする請求項1に記載の課金電子広告システム。従来の課金型電子広告システムは大型のディスプレイに不特定多数の通行人を対象として広告映像を表示するものであり、多数のインターネット端末である小型パーソナルコンピュータ、携帯電話等の所有者に向けた広告に対応していない。本発明は、多数のインターネット端末コンピュータに広告を行うのに適した課金型電子広告システムを提供することを目的とする。上記目的を達成するため、本発明は、課金条件が記載された情報からなるタグを備えた課金タグ付き電子広告データを生成する広告主側コンピュータと、画面の前方の情況を入力データとして取り込む電子機器を備えた多数の会員側端末コンピュータと、前記課金タグ付き電子広告データを受信し、前記課金条件の中、集計部分を削除した修正課金タグを生成する広告代理店側統括コンピュータとがインターネットを介して接続し、前記広告代理店側統括コンピュータのコントロール下で、前記広告主側コンピュータから出力された電子広告データが、これに修正課金タグが付加されて前記会員側端末コンピュータに送信され、該電子広告データが会員側端末コンピュータの画面に表示されるようにしたシステムであって、前記会員側端末コンピュータは、前記電子広告データを処理する広告データ受信処理プログラムを内蔵し、該プログラムは、受信した電子広告データの修正課金条件が達成されたか否かを前記電子機器からの入力データを解析して判断する入力映像解析手段を有し、前記広告代理店側統括コンピュータに内蔵されたプログラムは、前記会員側端末コンピュータから送信された修正課金条件判断データを集計し電子広告データの課金条件が達成されたか否かを判断するプログラムを有し、前記課金条件が達成されたとき、前記広告主側コンピュータに処理させるための課金請求データを生成するようにしたことを特徴とする。また本発明は、前記課金タグ付き電子広告データを作成するためのプログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該ウエブサイトから前記課金タグ付き電子広告データ作成プログラムが前記広告主側コンピュータにダウンロードされるようにしたことを特徴とする。また本発明は、前記課金請求データを処理し、該データに記載された課金を精算する課金請求データ精算プログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該プログラムが前記ウエブサイトから前記広告主側コンピュータにダウンロードされるようにしたことを特徴とする。また本発明は、前記入力映像解析手段を有する修正課金タグ付き広告データを処理する広告データ受信処理プログラムが前記広告代理店側統括コンピュータのウエブサイトに用意され、該ウエブサイトから前記広告データ受信処理プログラムが前記会員側端末コンピュータにダウンロードされるようにしたことを特徴とする。また本発明は、前記会員側端末コンピュータは、前記広告代理店側統括コンピュータのウエブサイトの会員リストデータベースに登録されていることを特徴とする。また本発明は、前記課金条件が、前記会員側端末コンピュータの電子広告データ表示画面に対する該コンピュータ所有者の注視時間が所定時間以上であり、該注視時間を満足する会員側端末コンピュータ数が所定数を超えるということを内容とする。また本発明は、前記修正課金条件が、前記会員側端末コンピュータの電子広告データ表示画面に対する該コンピュータ所有者の注視時間が所定時間以上であることを内容とするものである。本発明は、スポンサーが広告効果のなかった広告に対して広告料を支払うというリスクを負うことなく、多数のインターネット端末の所有者に対して効果的な広告を行うことができる。以下に本発明の構成を添付した図面を参照して詳細に説明する。図1,3は、本システムのハードウエア構成図を示し、システムを統括する広告代理店側の統括コンピュータ1は、ワークステーションから構成される。統括コンピュータ1の中央処理装置15は、図4に示すように、ネットワークインターフェイス16を介してインターネット2に接続し、ウエブサイト構築プログラム3によって、インターネット2に公開される、本システムを運営するための課金電子広告ウエブサイト11を構築している。統括コンピュータ1の記憶装置23には、課金タグ付き電子広告データ作成プログラム4、集計プログラム6、修正課金タグ付き広告データ受信処理プログラム7、課金請求データ精算プログラム8、会員リストデータベース9、修正課金タグ作成プログラム10、その他本システムの運営に必要な各種のプログラムやデータが格納されている。インターネット2には、種々のネットワークを介して、多数の会員側端末コンピュータ12が、接続している。会員側端末コンピュータ12は、パソコン、コンピュータ内蔵携帯電話、携帯型情報端末などから構成され、それぞれ図2に示すようにスピーカ20、マイクロフォン26、動画及び静止画撮影用のデジタルビデオカメラ24,及びタッチパネル142の付いた映像表示入力画面22を備えている。タッチパネル142は図5に示すように、タッチパネル制御プログラム145により制御されるように構成されている。また、インターネット2には、種々のネットワークを介して、複数の広告主側コンピュータ13と、デジタル広告映像作成業者側コンピュータ14が接続している。図7~10は、本システムに使用されるタグ付きデータのフォーマットであり、図7は、広告主側コンピュータから広告代理店側統括コンピュータに送られる課金タグ付き電子広告データ28を示し、図8は、広告代理店側統括コンピュータから広告主側コンピュータに送られる課金タグ付きデータ30を示している。また、図9は、広告代理店側統括コンピュータから会員側端末コンピュータに送られる修正課金タグ付き電子広告データ29を示し、図10は、会員側端末コンピュータから広告代理店側統括コンピュータに送られる修正課金タグ付きデータ31を示している。図8と10のタグ付きデータのデータ構造は同一である。また、図7と図9のタグ付き電子広告データ28,29は、図9のタグ付き電子広告データ29に修正タグ35が付加された以外は、同一のデータ構造となっている。図7において、データ28は、ユニークワード32、タグ34、データブロック36から成り、タグ34は、ヘッダ38、認証データ部40、課金保証データ部42、タグチェックコード44から成り、認証データ40は、ヘッダ46、認証データ48から構成され、課金保証データ部42は、ヘッダ50、課金保証データ52から構成されている。データブロック36は、ヘッダ54、広告映像音声データ56、データブロックチェックコード58から成り、広告映像音声データ56は、メインシナリオ60、多数のユニットデータ62とから構成され、メインシナリオ60は、ヘッダ64、データ66から成り、ユニットデータ62の各ユニットは、ヘッダ68、データ70とから構成されている。前記ユニークワード32は、課金タグ付きデータ28の識別同期符号から成る。ヘッダ38は、タグ34のバイト数を示す。認証データ48は、広告主IDコード、広告代理店IDコードから成る。尚、図9においては、認証データ48’は、広告代理店IDコード、会員端末IDコードから成る。ヘッダ50は、課金保証データ52のバイト数を示す。課金保証データ52は、課金タグ付きデータ28のシリアル番号、課金金額、課金条件から構成される。課金条件は、広告主の希望する広告効果を得るための条件であり、例えば、広告映像画面を0.5秒以上注視する会員の数が10万を超えること等である。尚、図9において、課金保証データ52’の修正課金条件は広告映像画面を0.5秒以上注視すること等である。タグチェックコード44は、タグのヘッダ38、認証データ部40、課金保証データ部42の誤り検出訂正符号から構成される。ヘッダ54は、データブロック36のバイト数から構成される。ヘッダ64はメインシナリオ60のバイト数から構成される。データ66は、ユニットデータ62の実行手順、ユニットデータ62へのリンク情報から構成される。ヘッダ68は各ユニットデータ62のバイト数を示し、データ70はユニットデータ62の映像音声データから構成される。データブロックチェックコード58は、データブロック36のヘッダ54、広告映像データ56の誤り検出訂正符号から構成される。図8において、タグ付きデータ30は、ユニークワード72、タグ74、データブロック76から成り、タグ74は、ヘッダ75、認証データ78、課金請求データ80、タグチェックコード82から成る。認証データ部78はヘッダ84と認証データ86とから構成される。課金請求データ部80は、ヘッダ88と課金請求データ90とから構成される。データブロック76は、ヘッダ92、広告結果データ部94、データブロックチェックコード96から成る。広告結果データ部94は、ヘッダ98と広告結果データ100とから成る。ユニークワード72は課金タグ付きデータ30の識別同期符号から構成され、ヘッダ75はタグ74のバイト数を示し、ヘッダ84は、認証データ86のバイト数を示し、認証データ86は、広告代理店IDコード、広告主IDコードから構成される。尚、図10においては認証データ86は、会員端末IDコード、広告代理店IDコードから成る。ヘッダ88は課金請求データ90のバイト数を示し、課金請求データ90は課金タグ付きデータ28のシリアル番号、課金金額、課金条件から構成される。図10の修正課金タグ付きデータ31においては、課金請求データ90’は修正課金タグ付き電子広告データ29のシリアル番号、修正課金条件から構成される。タグチェックコード82は、タグ74のヘッダ75、認証データ78、課金請求データ部80の誤り検出訂正符号から構成される。ヘッダ92はデータブロック76のバイト数を示し、ヘッダ98は、広告結果データ100のバイト数を示し、広告結果データ100は、認識結果、広告効果、ログからそれぞれ構成される。データブロックチェックコード96は、データブロック76のヘッダ、広告結果データ部94の誤り検出訂正符号から構成される。図11は本システムで使用されるデータの構造を示している。図11に示す、映像音認識データ102のデータ構造は以下の通りである。背景データ102aは、人物像と思われる映像情報以外のカメラ入力からの映像データで、統計処理などを施した背景抜き取り用データである。人物モデルデータ102bは、多数の人物画像から統計処理などによって得た普遍的な特徴量を持つ人物モデルである。顔モデルデータ102cは、多数の人物の顔画像から統計処理などによって得た普遍的な特徴量を持つ顔モデルである。目、瞳モデルデータ102dは、多数の人物の目、瞳画像から統計処理などによって得た普遍的な特徴量を持つ目、瞳モデルである。笑顔モデルデータ102eは、多数の人物の笑顔画像から統計処理などによって得た普遍的な特徴量を持つ笑顔モデルである。顔オブジェクトデータ102fは、顔追跡処理単位毎のオブジェクト認識の各種情報である。顔オブジェクトデータ102fは、会員の顔オブジェクトデータから成り、会員の顔オブジェクトデータは、会員の顔追跡処理のオブジェクト認識の履歴、認識情報である。尚、上記において、特徴量とは、人物、顔、目、笑顔等の形状の特徴を数値化したものであり、人間の顔の皺、瞼、瞳、唇、歯等の各器官の相対位置、形状、相互関連度、変化の速さなどである。認識解析結果データ104のデータ構造は、以下の通りである。認識解析データシリアルNo:00000001プロジェクトコード:PrjctCd0001電子広告媒体No:EastStreet97日時:2010080823000020100808235959画面注視時間:xxxx広告結果データ100のデータ構造は、以下の通りである。広告結果データ:課金タグ付きデータシリアルNoKTD0001電子広告媒体No:EastStreet97日時:2010080823000020100808235959画面注視時間:xxxx出力補正用データ106の各ブロック106a、106b、106cのデータ構造は以下の通りである。ブロック106a:出力補正データシリアルNo:00000001プロジェクトコード:PrjctCd0001シナリオコード:ABCD0001シナリオスクリプトリンク情報:刺激用修正映像音声情報親リンク情報:00000001子リンク情報:00000003映像音声データブロック106b:出力補正用データシリアルNo:00000002プロジェクトコード:PrjctCd0001シナリオコード:ABCD0001シナリオスクリプトリンク情報:刺激用修正映像音声情報親リンク情報:00000001子リンク情報:00000003映像音声データブロック106c:出力補正用データシリアルNo:00000003プロジェクトコード:PrjctCd0001シナリオコード:ABCD0001シナリオスクリプトリンク情報:刺激用修正映像音声情報親リンク情報:00000001子リンク情報:None映像音声データ出力データ108の各ブロック108a、108b、108cのデータ構造は以下の通りである。ブロック108a:出力データシリアルNo:T00000001作成プロセスIDPC00001映像音声リンクアドレス情報:T00000002T00000003映像音声データブロック108b:出力データシリアルNo:T00000002作成プロセスID:PC00001映像音声リンクアドレス情報:T00000003映像音声データモード:MPEG4映像音声データブロック108c:出力データシリアルNo:T00000003作成プロセスID:PC00001映像音声リンクアドレス情報:None映像音声データモード:MPEG4映像音声データ:認証データ48のデータ構造は、以下の通りである。認証データ:広告主IDコード、広告代理店IDコード課金保証データ52のデータ構造は、以下の通りである。課金タグ付きデータシリアルNo:KTD0001課金金額:200000課金条件:画面注視時間:05秒注視時間満足人数閾値:N課金請求データ90のデータ構造は以下の通りである。課金タグ付きデータシリアルNo:KTD0001課金金額:200000課金条件:画面注視時間:05秒注視時間満足人数閾値:N判定結果:次に、広告代理店側のウエブサイトを通じたシステム管理作業について説明する。まず、広告代理店側管理者は、ウエブサイト11を通じて課金電子広告システムに協力するインターネット端末会員を募集する。広告代理店側と会員側との間には、会員契約が締結され、会員側にその協力に対して所定の対価がポイント制などの形態で広告代理店側から支払われる。広告代理店側の統括コンピュータ1の会員リストデータベース9には、会員の特定のためのデータが記録される。また、会員契約が成立すると、統括コンピュータ1から修正課金タグ付き広告データ処理プログラム7が会員側端末コンピュータ12にダウンロードされ、該広告データ処理プログラム7によって、会員側端末コンピュータ12に図5に示すように電子広告掲示システムが構築される。また、広告主から、課金電子広告利用の申し込みがウエブサイト11を通じて成されると、広告代理店側の統括コンピュータ1から統括プログラム112を含む課金タグ付き電子広告データ作成プログラム4が、広告主側のコンピュータにダウンロードされ、これらのプログラムによって広告主側コンピュータ13に図6に示すように課金電子広告作成システムが構築される。広告主側コンピュータ13は、インターネット2を通じて広告映像作成業者のコンピュータ14から提供された広告映像音声データに基づいて、課金電子広告を作成する。以下に広告主側コンピュータ13による課金電子広告作成動作を図12に示すフローチャートを参照して説明する。図12において、広告主側システム2の、広告映像音声データの作成、タグ付加、送信に関する動作は、ラベルR1から入る。広告主側システム2は、ステップS1で、統括プログラム112は、広告のストーリー情報に基づいてストーリー情報110を作成する。このストーリー情報110は、複数のステージ行程から構成されている。次に、ステップS2で、映像音声作成プログラム114は、ストーリー情報110の各ステージに基づき、各ステージを構成する映像音声のユニットデータ62を作成する。次に、ステップS3で、シナリオ作成プログラム116は、ストーリー情報に基づき、ステージ毎に展開したメインシナリオ66を作成する。次にステップS4で、統括プログラム112は、メインシナリオ66と映像音声のユニットデータ62とを合成して広告映像音声データ56を作成する。次に、ステップS5で、課金プログラム118は、課金保証に関する入力データに基づき、課金保証データ部52を作成する。次にステップS6で、認証プログラム120は、認証に関する入力データに基づき、認証データ48を作成する。次に、ステップS7で、統括プログラム112は、課金保証データ52と、認証データ48とからタグ34を作成する。次に、ステップS8で、統括プログラム112は、広告映像音声のデータブロック36とタグ34から、課金タグ付きデータ28を生成する。次に、ステップS9で、統括プログラム112は、課金タグ付きデータ28を、課金電子広告掲示システム6へネットワークを介して送出し、広告主側コンピュータ13の送信処理を完了する。図13は、広告主側コンピュータ13の広告主側システムの課金請求データ受信の処理を示している。図13において、広告主側システムは、課金請求データのネットワーク受信処理のスタートをラベルR2から入る。広告主側システムは、ステップS1で、認証プログラム120は、統括コンピュータ1から受信した認証データ86を検証する。次に、認証プログラム120は、ステップS2で、認証データ86の検証ができたか否か判断する。ステップS2で否定を判断するとステップS1に戻り肯定を判断するとステップS3で、課金プログラム118は、タグ74から課金請求データ90を分離する。次に、ステップS5で、結果検証プログラム122は、広告結果データ100を検証する。次に、結果検証プログラム122は、ステップS6で、広告結果データ100の検証ができたか否か判断する。ステップS6で否定を判断すると、広告主側システム2は、処理を終了する。また、結果検証プログラム122が、判断ステップS6で、肯定を判断すると、ステップS7で、統括プログラム112は、課金請求を精算し、処理を終了する。次に、広告代理店側統括コンピュータ1の受信処理動作について説明する。広告代理店側統括コンピュータ1は、インターネット2を通じて広告主側コンピュータ13から課金タグ付き電子広告データ28を受信すると、課金条件を図9に示すように、単一の会員側端末コンピュータ12に適した課金条件に修正した修正タグ35を作成し、会員側端末コンピュータ12用の修正課金タグ付き電子広告データ29を作成する。修正された課金条件は、例えば課金条件が広告映像画面を0,5秒以上注視する会員の数が10万を超えることであるとすると、集計部分が削除されて、広告映像画面を0,5秒以上注視するとなる。次に、広告代理店側統括コンピュータ1は、インターネット2を通じて、各会員側端末コンピュータ12に修正課金広告電子データ29を送信する。この修正課金電子広告データ29は、5秒程度を30分に1回繰り返し各会員側端末コンピュータ12に送信される。図18は、広告代理店側統括コンピュータ1から各会員側端末コンピュータ12に電子広告データ29が送信され会員側端末コンピュータ12に初期画面が表示された状態を示している。この初期画面データは、1日に1回程度表示されるように予め会員側において設定されている。初期画面には、拒否23と応諾25のボタンが表示され、会員がタッチパネル142に触れて、応諾のボタン25を押すと、会員側端末コンピュータ12にアニメーションからなる広告映像音声データの映像が表示される。拒否のボタン23を押した場合には、会員側端末コンピュータ12への送信が停止し、初期画面の映像が消去される。会員側端末コンピュータ12は、ビデオカメラ24からの入力とダウンロードされたプログラムに基づいて、カメラ24の前の人物204の顔を認識し、これら人物を特定し、会員契約者を特定する。また、人物の目の動きから、視線を認識し、端末コンピュータ12の画面22に表示されるアニメーションなどの広告映像データへの注視時間をカウントする。また、顔表情から人物の感情、関心を認識する。また、身振りから応諾、拒否、疑問などを認識する。また、マイクロホン26からの入力を通じて、人物の音声や感情を認識する。次に会員側端末コンピュータ12の修正課金タグ付きデータ受信の処理動作を、図14を参照して説明する。図14において、端末コンピュータ12は、課金タグ付きデータ受信の処理動作をラベルR3から入る。端末コンピュータ12のデータ受信処理がスタートすると、ステップS1で、認証プログラム124は、受信した修正課金タグ付きデータ28の認証データ48を分離検証する。次にステップS2で、認証プログラム124は、認証データ48の検証ができたか否か判断し、肯定を判断すると、ステップS3で、課金プログラム126は、受信した修正課金タグ付きデータの課金保証データ52を分離、検証、保存する。次のステップS4で、統括プログラム128は、課金保証データ52の修正課金条件から判定項目と閾値とを課金判定条件として設定する。次に、ステップS5で、統括プログラム128は、受信した修正課金タグ付きデータ28の広告映像音声データ56を分離し、保存、且つ、広告映像音声データ56からメインシナリオ60、映像音声ユニットデータ62を分離し、保存する。次に、ステップS6で、統括プログラム128はメインシナリオ60と修正課金条件からストーリーを構築し、ステップS7で、ユニットデータ62に基づいて、出力制御プログラム130下に出力オブジェクトを生成し、映像、音声入力に基づいて、解析プログラム132下に入力オブジェクトを生成し、これらオブジェクト間の通信を管理する。入力オブジェクトは、カメラ24の入力映像データを認識解析することで生成される。出力データや入力データに基づいて、出力オブジェクトや入力オブジェクトを生成する方法は従来知られているプログラム技術特許文献2参照であり、本実施形態では従来知られているプログラム生成技術を用いている。統括プログラム128中のオブジェクト生成制御を担当するプログラム部分を便宜上、ストーリーマネージャーと称する。このステップS7の処理を図15に示すフローチャートを参照して以下に詳しく説明する。図14に示すステップS7のスタートは、図15のラベルR5から入る。統括プログラム128は、ステップS1で、シナリオに基づき、映像音声ユニット62を編成して各ステージを構成、反応度の閾値を設定し、第1ステージをスタートする。次に、ステップS2で、ステージ毎に該当する出力オブジェクトの場面の管理を行う。次に、ステップS2で、出力制御プログラム130は、場面を構成する。次に、ステップS3で、表示音出力プログラム134は、場面のオブジェクト毎に、表示音出力を生成する。次に、ステップS5で、表示音出力プログラム134は、合成画面を表示入力部22に出力し、出力合成音をスピーカー20に出力する。次に、ステップS6で、統括プログラム128は、解析プログラム132で生成した人物オブジェクト入力オブジェクトの反応度をチェックする。ここで反応度とは、画面注視時間などを意味する。次に、ステップS7で、出力制御プログラム130は、ステージが終了したか否か判断し、肯定を判断すると、ステップS9に移行する。ステップS7で否定を判断すると、ステップS8で、反応度が閾値以上か否か判断し、肯定を判断すると、ステップS9に移行する。ステップS8で否定を判断すると、ステップS13で、出力制御プログラム130は、ステージ、オブジェクト、刺激度、反応度を基準として、登場場面を出力補正用データ106内で検索する。次に、ステップS14で、出力制御プログラム130は、出力補正用データ106内に、刺激度、反応度の大きい場面が有るか否か判断し、否定を判断した場合には、輝度、コントラスト、音量、アニメーションモーフィング等を変化させて、現在の刺激場面を更に大きく補正し、ステップS16に移行する。ステップS14で肯定を判断すると、ステップS16で、出力制御プログラム130は、刺激度、反応度の大きな場面でストーリーを再構築し、ステップS4に移行する。ステップS8で、肯定を判断した場合は、出力制御プログラム130は、場面を反応度と共に出力補正用データ106として登録する。次に、ステップS10で、出力制御プログラム130は、ストーリーが終了段階か否か判断し、否定を判断すると、ステップS11で、次のステージをスタートさせ、ステップS2に移行する。ステップS10で肯定を判断すると、ステップS12で広告効果データ100即ち、人物オブジェクトの画面注視時間を含むログを生成し、これを統括プログラム128に送出し、処理を終了する。上記ステップS6での人物オブジェクトの反応度のチェックでは、顔認識と顔追跡の並列的処理が実行される。次に、上記顔認識と顔追跡処理の動作について図16に示すフローチャートを参照して説明する。顔認識追跡処理がラベルR6からスタートすると映像音認識プログラム136による人物の顔検出処理がスタートするステップS1。次に、ステップS2で、映像音認識プログラム136は、カメラ入力による映像データ、マイク入力による音データから人物認識処理をスタートする。次に、ステップS3で映像入力データから背景を消去し、人物モデルデータによる普遍的特徴量を閾値以上に多く持つオブジェクトを人物オブジェクトとして検出する。次に、ステップS4で、顔モデルデータによる普遍的特徴量を閾値以上に多く持つオブジェクトを顔オブジェクトとして検出する。次に、ステップS5で、発生、消滅、移動、変化するオブジェクトとして、顔オブジェクト毎に対応した顔追跡処理を生成する。この並列的顔追跡処理は、ステップS6で、目瞳モデルデータによる普遍的特徴量を閾値以上多く持つオブジェクトを目瞳オブジェクトとして検出する。次に、顔追跡処理は、ステップS7で、目瞳オブジェクトの中の瞳の目に対する位置で視線、およびその方向を検出する。次に、ステップS8で顔追跡処理は、笑顔モデルデータによる普遍的特徴量を閾値以上多く持つオブジェクトを笑顔オブジェクトとして検出する。次に、ステップS9で、映像音認識プログラム136は、顔追跡処理が追跡する顔オブジェクトが、顔モデルデータによる普遍的特徴量を閾値以上多く持つか否か調査する。ステップS10で、映像音認識プログラム136は、前記顔オブジェクトの普遍的特徴量を閾値以上であるか否か判断し、否定を判断すると、ステップS11で、閾値未満のオブジェクトを追跡する処理を消去して、ステップS12に移行する。ステップS10で肯定を判断すると、ステップS12で、統括プログラム28は、映像音認識プログラムから人物オブジェクトの反応度等のパラメータを取得し、顔オブジェクトとその持つ視線方向、及び笑顔オブジェクトとを解析プログラム132に引き渡して処理を終了する。次に、再び図14に戻り、ステップS8以下の処理について説明する。ステップS8で、統括プログラム128は、ストーリーが終了したか否か判断する。肯定を判断すると、次に、ステップS9で、ストーリー回数が終了したか否か判断し、否定を判断するとステップS7に戻り、肯定を判断すると、ステップS10に移行する。ステップS10で、統括プログラム128は、広告結果データ100をストーリーマネージャーから受け取り、ステップS11で、広告結果データ100が修正課金条件、例えば画面注視時間を満たしているか判断する。次に、ステップS12で判定結果が満足できるものであるか否か判断し、肯定を判断すると、ステップS13で、解析プログラム132は、映像音認識データ140に基づいて、解析した認識解析結果データ138を保存し、課金開始イベントを発生する。ステップS12で否定を判断したときは、処理を終了する。次に、図7を参照して、会員側端末コンピュータ6の修正課金タグ付きデータ送信処理について説明する。ラベルR4から課金開始イベントがスタートすると、ステップS1で、課金プログラム126は、課金請求データ90を作成する。次に、ステップS2で、認証プログラム124は、認証データ86を作成する。次に、ステップS3で、統括プログラム128は、課金請求データ90と認証データ86とから、タグ74を作成する。次に、ステップS4で、統括プログラム128は、認識解析結果データ138から、広告結果データ100を作成する。次に、ステップS5で統括プログラム128は、広告結果データ100を含むデータブロック76とタグ74から修正課金タグ付きデータ30を作る。次に、ステップS6で統括プログラム128は、修正課金タグ付きデータ30をネットワークを通して、広告代理店側の統括コンピュータ1に送出し、処理を終了する。広告代理店側の統括コンピュータ1は、各会員側端末コンピュータ12からの修正課金タグ付きデータ31を集計プログラム6に基づいて集計し、集計データが課金条件を満足すると、課金タグ付きデータ30をネットワーク2を通して、広告主側コンピュータ13の課金精算システムに送出し、処理を終了する。"