【手続補正書】
【提出日】令和2年3月16日(2020.3.16)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ユーザの顔画像を撮影する顔画像撮影部（２、３）と、
前記顔画像撮影部により撮影された顔画像を含んだ解析に基づいてユーザの国籍を絞り込む国籍絞り込み部（８ａ）と、
ユーザへの呼びかけ言語を選択する呼びかけ言語選択部（８ｂ）と、
前記国籍絞り込み部がユーザの国籍を絞り込めなかった場合は、前記言語選択部により選択された１以上の言語にて呼びかけを行う呼びかけ部（８ｃ）と、
前記呼びかけ部による前記１以上の言語の呼びかけの間、または、呼びかけ後、呼びかけに対するユーザの顔画像の変化やユーザの応答結果に基づいてユーザの反応を検出し、ユーザが使用する言語を推定する使用言語推定部（８ｄ）と、
前記国籍絞り込み部により絞り込まれた国の言語、または、前記使用言語推定部により推定された使用言語を用いてユーザが理解できる表示画面を表示する表示制御部（８ｅ）と、
を備えた車載情報表示装置。
【請求項２】
推定された使用言語を用いてユーザが日常的に走行する道路エリアを選択する道路エリア選択部（８ｆ）を備えた請求項１記載の車載情報表示装置。
【請求項３】
ユーザが注視する複数の物体を検出する注視物体検出部（６）と、
ユーザが注視した物体について、ユーザがその物体の特性を知りたいかどうかを判定する注視物体情報判定部（８ｇ）と、
を備えた請求項１または２記載の車載情報表示装置。
【請求項４】
ユーザが特性を知りたいと判定された物体について、前記物体の近傍に前記物体の特性を重畳表示する重畳表示制御部（８ｈ）を備えた請求項３記載の車載情報表示装置。
【請求項５】
ユーザが特性を知りたいと判定された物体について、前記物体の上に前記物体の特性を重畳表示する重畳表示制御部（８ｈ）を備えた請求項３記載の車載情報表示装置。
【請求項６】
前記顔画像撮影部により撮影された顔画像を含んだ解析に基づいてユーザを個人認識するユーザ認識部（８ｉ）と、
前記ユーザ認識部が個人認識したユーザが特性を知りたいと判定された物体について、前記物体の上に前記物体の特性を重畳表示する重畳表示制御部（８ｈ）と、
を備えた請求項３記載の車載情報表示装置。
【請求項７】
前記物体の特性としては、物体の画像、物体を説明する画像情報や文字情報が含まれている請求項４から６のいずれか一項記載の車載情報表示装置。
【請求項８】
前記重畳表示制御部は、前記物体が道路上に設置された標識である場合、車両のウインドシールドガラスを通してユーザが見る前記標識の近傍に、前記標識の意味を説明する画像情報や文字情報を重畳表示するように構成された請求項７記載の車載情報表示装置。
【請求項９】
前記重畳表示制御部は、ユーザが外国人であった場合、ユーザの国籍とユーザが高い頻度で利用する道路エリアの地図情報に基づいて、標識の意味をユーザが理解できるように説明する画像情報や文字情報を重畳表示するように構成された請求項８記載の車載情報表示装置。
【請求項１０】
ユーザの顔画像を撮影する顔画像撮影部（２，３）と、
前記顔画像撮影部により撮影された顔画像を含んだ解析に基づいてユーザの国籍を絞り込む国籍絞り込み部（８ａ）と、
ユーザへの呼びかけ言語を選択する呼びかけ言語選択部（８ｂ）と、
前記国籍絞り込み部がユーザの国籍を絞り込めなかった場合は、前記言語選択部により選択された１以上の言語にて呼びかけを行う呼びかけ部（８ｃ）と、
前記呼びかけ部による前記１以上の言語の呼びかけの間、または、呼びかけ後、呼びかけに対する顔画像の変化やユーザの応答結果に基づいてユーザの反応を検出し、ユーザが使用する言語を推定する使用言語推定部（８ｄ）と、
を備えた使用言語推定装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
請求項１の発明は、ユーザの顔画像を撮影する顔画像撮影部（２、３）と、前記顔画像撮影部により撮影された顔画像を含んだ解析に基づいてユーザの国籍を絞り込む国籍絞り込み部（８ａ）と、ユーザへの呼びかけ言語を選択する呼びかけ言語選択部（８ｂ）と、前記国籍絞り込み部がユーザの国籍を絞り込めなかった場合は、前記言語選択部により選択された１以上の言語にて呼びかけを行う呼びかけ部（８ｃ）と、前記呼びかけ部による前記１以上の言語の呼びかけの間、または、呼びかけ後、呼びかけに対するユーザの顔画像の変化やユーザの応答結果に基づいてユーザの反応を検出し、ユーザが使用する言語を推定する使用言語推定部（８ｄ）と、前記国籍絞り込み部により絞り込まれた国の言語、または、前記使用言語推定部により推定された使用言語を用いてユーザが理解できる表示画面を表示する表示制御部（８ｅ）と、を備えた車載情報表示装置である。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
請求項１０の発明は、ユーザの顔画像を撮影する顔画像撮影部（２，３）と、前記顔画像撮影部により撮影された顔画像を含んだ解析に基づいてユーザの国籍を絞り込む国籍絞り込み部（８ａ）と、ユーザへの呼びかけ言語を選択する呼びかけ言語選択部（８ｂ）と、前記国籍絞り込み部がユーザの国籍を絞り込めなかった場合は、前記言語選択部により選択された１以上の言語にて呼びかけを行う呼びかけ部（８ｃ）と、前記呼びかけ部による前記１以上の言語の呼びかけの間、または、呼びかけ後、呼びかけに対する顔画像の変化やユーザの応答結果に基づいてユーザの反応を検出し、ユーザが使用する言語を推定する使用言語推定部（８ｄ）と、を備えた使用言語推定装置である。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
情報処理装置８は、言語データベース、地図データベース、標識データベース、構築物データベース等が記憶された記憶部を有すると共に、カーナビゲーション装置としての機能、即ち、車両の位置を検出する機能、車両の走行方向を検出する機能、目的地までの誘導経路を算出する機能、誘導経路を経路案内する機能等を有する。情報処理装置８は、ＤＳＭコントローラ６から視線情報や顔画像情報や注視物体の情報等を入力し、車外撮影用カメラ７からの画像情報を入力し、車両の現在位置、走行方向、地図データベースや構築物データベース等を参照して、ユーザが見ている注視物体の候補を推定、即ち、検出する機能を有する。情報処理装置８は、国籍絞り込み部８ａ、呼びかけ言語選択部８ｂ、呼びかけ部８ｃ、使用言語推定部８ｄ、表示制御部８ｅ、道路エリア選択部８ｆ、注視物体情報判定部８ｇ、重畳表示制御部８ｈ、ユーザ認識部８ｉとしての各機能を有している。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
上記ミラーアイカメラ２の画像情報と車外撮影用カメラ７の画像情報とを認識処理することにより、ＤＳＭコントローラ６及び情報処理装置８は、ユーザが車外のどの範囲を見ているかを判定する。そして、ユーザが車外の特定の場所や物体を注視していることが検知されると、ユーザが何を見ているかの判定処理が情報処理装置８にて実行される。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０１１４
【補正方法】変更
【補正の内容】
【０１１４】
図面中、１は標識認識報知システム、２はミラーアイカメラ、３はディスプレイアイカメラ、４は生体情報センサ、６はＤＳＭコントローラ、７は車外撮影用カメラ、８は情報処理装置、８ａは国籍絞り込み部、８ｂは呼びかけ言語選択部、８ｃは呼びかけ部、８ｄは使用言語推定部、８ｅは表示制御部、８ｆは道路エリア選択部、８ｇは注視物体情報判定部、８ｈは重畳表示制御部、８ｉはユーザ認識部、９は報知部、１１は通信装置、１３はバックミラー、１４はディスプレイ、１５はスピーカ、１７はステアリング、２０は標識、３１は標識、３２は仮想画像である。
【手続補正７】
【補正対象書類名】図面
【補正対象項目名】図１
【補正方法】変更
【補正の内容】
【図１】
2019113520.tif 000001