(57)【要約】【課題】口腔カメラシステムを用いるユーザを、歯の写り込んだ静止画像データによる静止画像に写っている歯がどの歯で有るかを特定するデータの入力の手間から解放する。【解決手段】カメラ部１００は、マイクロフォンから受付けた音声信号に対して音声認識を行う音声認識部１２７Ｂを備える。音声認識部１２７Ｂにより生成されたたユーザが発した指示音声に対応するデータである音声認識データは、主制御部１２７Ａに送られ、主制御部１２７Ａにて生成された静止画像データに付加される。【選択図】図１１
2019141582.tif 000002
【特許請求の範囲】
【請求項１】
口腔内に挿入可能な挿入部と、口腔内の静止画像を少なくとも撮像し、静止画像についての静止画像データを生成することができるようにされている撮像素子とを備えた、手持ち可能なカメラ部と、
前記カメラ部の撮像素子で撮像されている歯が属する歯におけるグループを少なくとも特定する情報と、当該歯がどちらの方向から撮像されているかを特定する情報とを含む音声である指示音声を捉え、捉えた指示音声に応じた信号である音声信号を生成する音声センサと、
前記音声センサで生成された音声信号に基づき前記指示音声を自動的に認識する音声認識部と、
前記音声認識部で認識された前記指示音声に基づき、前記カメラ部において前記撮像素子が生成した静止画像データに対して、必要に応じて所定の角度だけ前記静止画像を回転させる画像処理を行う画像処理部と、
を備えている、
口腔カメラシステム。
【請求項２】
前記画像処理部は、前記音声認識部で認識された前記指示音声に基づく情報を、前記静止画像データに対して付加するようになっている、
請求項１記載の口腔カメラシステム。
【請求項３】
前記静止画像データを記録することができるデータ記録部を備えているとともに、
前記画像処理部は、必要に応じて所定の角度だけ前記静止画像を回転させる画像処理を行った後の前記静止画像データを前記記録部に記録するようになっている、
請求項１又は２記載の口腔カメラシステム。
【請求項４】
前記画像処理部は、
予め定められた前記指示音声のいずれかを特定するデータである複数の指示音声データと、前記静止画像を回転させる角度を特定するデータである角度データとを、互いに紐付けた状態で記録する角度データ記録部と、
前記音声認識部で認識された前記指示音声についてのデータを受取った場合に、当該指示音声についてのデータと同じ前記指示音声データと紐付けられた前記角度データを前記角度データ記録部から読出すとともに、前記撮像素子が生成した静止画像データに対して、前記角度データ記録部から読出した前記角度データに対応した角度だけ前記静止画像を回転させる画像処理を行う画像回転部と、
を備えている、請求項１〜３のいずれかに記載の口腔カメラシステム。
【請求項５】
前記音声センサが、前記カメラ部に設けられている、
請求項１記載の口腔カメラシステム。
【請求項６】
前記音声センサと、前記音声認識部とが、前記カメラ部に設けられている、
請求項１記載の口腔カメラシステム。
【請求項７】
前記音声センサと、前記音声認識部と、前記画像処理部とが、前記カメラ部に設けられている、
請求項１記載の口腔カメラシステム。
【請求項８】
前記カメラ部と通信可能であり、且つ情報処理を行うコンピュータ、及び静止画像データを記録するデータ記録部を備えている情報処理装置を含んでいるとともに、
前記音声センサが、前記情報処理装置に設けられている、
請求項１記載の口腔カメラシステム。
【請求項９】
前記音声センサと、前記音声認識部とが、前記情報処理装置に設けられており、
前記音声認識部の機能が、前記コンピュータによって実現されるようになっている、
請求項８記載の口腔カメラシステム。
【請求項１０】
前記音声センサと、前記音声認識部と、前記画像処理部とが、前記情報処理装置に設けられており、
前記音声認識部と、前記画像処理部との機能が、前記コンピュータによって実現されるようになっている、
請求項８記載の口腔カメラシステム。
【請求項１１】
前記音声センサは、前記撮像素子が前記静止画像データを生成するタイミングを特定する音声であるタイミング音声を捉え、捉えたタイミング音声に応じた信号である音声信号を生成するようになっているとともに、
前記音声認識部で、前記音声信号に基づく音声が前記タイミング音声であると認識された場合に、それを契機として前記撮像素子が前記静止画像データを生成するようになっている、
請求項１記載の口腔カメラシステム。
【請求項１２】
請求項１〜１１のいずれかに記載のカメラ部。
【請求項１３】
請求項８〜１１のいずれかに記載の情報処理装置。
【請求項１４】
口腔内に挿入可能な挿入部と、口腔内の静止画像を少なくとも撮像し、静止画像についての静止画像データを生成することができるようにされている撮像素子とを備えた、手持ち可能なカメラ部と、
前記カメラ部の撮像素子で撮像されている歯を歯単体として特定する情報を含む音声である詳細指示音声を捉え、捉えた詳細指示音声に応じた信号である詳細音声信号を生成する音声センサと、
前記音声センサで生成された詳細音声信号に基づき前記詳細指示音声を自動的に認識する音声認識部と、
前記音声認識部で認識された前記詳細指示音声に基づく情報を、前記静止画像データに対して付加するデータ付加部と、
を備えている、
口腔カメラシステム。
【請求項１５】
前記音声センサが、前記カメラ部に設けられている、
請求項１４記載の口腔カメラシステム。
【請求項１６】
前記音声センサと、前記音声認識部とが、前記カメラ部に設けられている、
請求項１４記載の口腔カメラシステム。
【請求項１７】
前記音声センサと、前記音声認識部と、前記データ付加部とが、前記カメラ部に設けられている、
請求項１４記載の口腔カメラシステム。
【請求項１８】
前記カメラ部と通信可能であり、且つ情報処理を行うコンピュータ、及び静止画像データを記録するデータ記録部を備えている情報処理装置を含んでいるとともに、
前記音声センサが、前記情報処理装置に設けられている、
請求項１４記載の口腔カメラシステム。
【請求項１９】
前記音声センサと、前記音声認識部とが、前記情報処理装置に設けられており、
前記音声認識部の機能が、前記コンピュータによって実現されるようになっている、
請求項１８記載の口腔カメラシステム。
【請求項２０】
前記音声センサと、前記音声認識部と、前記データ付加部とが、前記情報処理装置に設けられており、
前記音声認識部と、前記データ付加部との機能が、前記コンピュータによって実現されるようになっている、
請求項１８記載の口腔カメラシステム。
【請求項２１】
請求項１４〜２０のいずれかに記載のカメラ部。
【請求項２２】
請求項１８〜２０のいずれかに記載の情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、口腔カメラに関する。
【背景技術】
【０００２】
口腔内の撮像を行う口腔カメラが周知である。口腔カメラは主に歯科用であり、口腔内の特に歯或いは歯周の状況を動画又は静止画で撮像する。
【０００３】
歯科における口腔カメラの使用態様として基本的なものに、患者の歯の状態を静止画で記録するというものがある。例えば、治療の前後の歯の静止画を口腔カメラで撮像するとともに、その静止画を所定の記録媒体に記録しておき、その画像を所定のディスプレイに表示させることにより、患者の歯の経時的な変化を歯科医自身が確認する、或いは患者に確認させるというのが、口腔カメラの良くある利用の仕方である。
【０００４】
口腔カメラで上述のような静止画を得る場合、口腔カメラは一般的にディスプレイと組合せて利用される。例えば歯科医は、自らが把持した口腔カメラの先端を患者の口腔内に挿入して、患者の歯の動画を撮像しつつ、口腔カメラから出力された動画のデータに基く動画を、ディスプレイに略実時間で表示させる。
そして、例えば、治療の対象となる或いはなっている歯が動画に写り込んだときに、口腔カメラに設けられた操作子を操作すると、操作子が操作された瞬間に撮像されていた動画のデータが、静止画として所定の記録媒体に記録される。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、口腔カメラを用いて上述の如き方法で撮像された静止画にはちょっとした面倒がある。それは、静止画の天地が不揃いであるという点である。
静止画を撮像する際に、口腔カメラの先端は患者の口腔内に挿入されているが、口腔内にその先端が挿入された口腔カメラの姿勢は様々である。したがって、静止画に写り込んでいる歯は横向きであったり、天地が逆転して写っていたりする。そして、歯には当然に上の歯と下の歯が存在し、またその撮像の方向にも頬側、舌側等様々あるため、静止画を後から見た場合にその静止画本来の天地を理解するには困難がある。
【０００６】
本願発明は、口腔カメラで撮像された静止画を後から見た場合においてもその本来の天地を直感的に理解できるようにするための技術を提供することをその課題とする。
【課題を解決するための手段】
【０００７】
上述の課題を解決するために、本願発明者は以下の発明を提案する。
本願発明は、口腔内に挿入可能な挿入部と、口腔内の静止画像を少なくとも撮像し、静止画像についての静止画像データを生成することができるようにされている撮像素子とを備えた、手持ち可能なカメラ部と、前記カメラ部の撮像素子で撮像されている歯が属する歯におけるグループを少なくとも特定する情報と、当該歯がどちらの方向から撮像されているかを特定する情報とを含む音声である指示音声を捉え、捉えた指示音声に応じた信号である音声信号を生成する音声センサと、前記音声センサで生成された音声信号に基づき前記指示音声を自動的に認識する音声認識部と、前記音声認識部で認識された前記指示音声に基づき、前記カメラ部において前記撮像素子が生成した静止画像データに対して、必要に応じて所定の角度だけ前記静止画像を回転させる画像処理を行う画像処理部と、を備えている、口腔カメラシステムである。
かかる口腔カメラシステムは、カメラ部を備えている。カメラ部は、概ね従来の口腔カメラに相当するものであり、口腔内の静止画像を撮像し、静止画像データを生成することができるようにされていることが必須である。
口腔カメラシステムは、また、音声センサと、音声認識部とを備えている。音声センサは、口腔カメラシステムを操作或いは使用しているユーザ（例えば歯科医）が発する指示音声を捉えるとともに、指示音声に応じた音声信号を生成するものとなっている。指示音声は、その時点で撮像の対象となっている歯の属する歯におけるグループを特定する情報と、当該歯がどちらの方向から撮像されているかを特定する情報との組合せである。例えば、人間の上側（上顎）の歯の場合には、右側又は左側の中切歯から外側の歯に向けて１〜８までの番号を付すことで、各歯を特定するのが通例となっている（図１２参照）。下側（下顎）の歯の場合も同様である。したがって、例えば、「右上４番」とか、「左下２番」等の音声をユーザが発することにより、撮像の対象となっている歯を特定することができる。なお、歯科医療の現場では、例えば、右上を１、左上を２、右下を３、左下を４として、「右上４番」を、「１の４」、「左下４番」を「４の４」等と称することもある。いずれにせよ、「右上４番」とか、「１の４」とか、そういう音声をユーザが発すれば、それは歯が少なくとも歯におけるどのグループに属するか、ということを特定する情報となる。もっとも、上述の音声はいずれも、歯を一本毎に特定する音声であるが、指示音声における撮像対象となっている歯の特定は、一本単位の歯の特定である必要はない。例えば、右上に属する歯、左上に属する歯、右下に属する歯、左下に属する歯のそれぞれにおいて、それら各グループに属する歯が写っている静止画像について、ユーザが直感的に静止画像に写っている歯の天地を直感的に理解できるようにするためにその静止画像を回転させるべき角度が一致しているのであれば、ユーザはその４つのグループを特定する情報のみを音声で発すれば足りるということもある。その場合には、ユーザは、「右上（或いは１）」、「左上（或いは２）」、「右下（或いは３）」、「左下（或いは４）」という音声を、歯の属する歯におけるグループとして発声することができる。
また、一般に歯を撮像する場合には、少なくとも、頬側から或いは舌側からの撮像が行われる。したがって、歯を特定するための上述の音声に加えて、「頬側」、「舌側」等の音声をユーザが発することによって撮像の対象となっている歯をその時点でどの方向から撮像しているかを、特定することが可能となる。
音声認識部は、音声センサが生成した音声信号から、ユーザが発した指示音声を自動的に認識するようになっている。
他方、本願発明における口腔カメラシステムは、静止画像を適宜に回転させるように撮像素子から出力された静止画についての静止画像データに対して画像処理を行う画像処理部を備えている。画像処理部は、音声認識部で認識された指示音声に基いて、静止画像を適宜に回転させるように静止画像データに対して画像処理を行う。撮像素子から出力される静止画像データによる静止画像は、そのときのカメラ部の向きに応じたものとなり、その天地を含めた角度は、本来の上下方向の向きとは一致していない。例えば、上顎の歯は本来、上側に存在する歯肉から下向きに生えているはずなのに、静止画像中では、右側に位置する歯肉から左向きに生えているというようなことが生じうる。このような静止画像を後から確認する場合には、ユーザは、自らの頭の中で静止画像を回転させて静止画像の向きを補正する処理が必要となるから、静止画像に写り込んだ歯の本来の向きを直感的に理解することが難しい。静止画像データに対して、音声信号に基いて上述の如き静止画像を回転させる画像処理を行うことにより、静止画像データによって特定される静止画像の向きを、本来の上下方向の向きに一致させることが可能となる。
それにより、ユーザは、後からその画像処理後の静止画像データに基づく静止画像を見た場合において、静止画像に写り込んだ歯の本来の向きを直感的に理解できることになる。
本願発明の口腔カメラシステムにおいて、前記音声センサは、前記撮像素子が前記静止画像データを生成するタイミングを特定する音声であるタイミング音声を捉え、捉えたタイミング音声に応じた信号である音声信号を生成するようになっていてもよい。この場合、前記音声認識部で、前記音声信号に基づく音声が前記タイミング音声であると認識された場合に、それを契機として前記撮像素子が前記静止画像データを生成するようになっていてもよい。この口腔カメラシステムにおいて、タイミング音声は、一般的なカメラにおけるシャッターボタンの如く機能する。本願発明における口腔カメラシステムは上述のように静止画像の撮像を行う（静止画像データを生成する）ものであるから、どのタイミングで静止画像の撮像を行うか特定することが必要となる。一般的なカメラの場合と同様、そのタイミングの特定は、例えばカメラ部に設けたシャッターボタンの押込み（或いは、シャッターボタンと同等の機能を有する操作子の操作）によって実現することもできる。しかしながら、操作子をカメラ部に設けそれを例えば歯科医師に操作させることとした場合には、操作子の操作によってカメラ部に振れが生じるおそれがある。そのような振れは、撮像された静止画像において手ブレとして現れる。歯科医師等が発したタイミング音声をシャッターボタンの押込みと同等のタイミングを特定するためのきっかけとして用いることにより、静止画像において手ブレが生じることを回避できるようになる。タイミング音声は口腔カメラシステムにおいて適当に決定することができるが、例えば、「シャッター」とか、「撮像」といった言葉でよい。
【０００８】
口腔カメラシステムは、カメラ部に、音声センサ、音声認識部、画像処理部のすべてを組み込むことができる。つまり、前記音声センサと、前記音声認識部と、前記画像処理部とが、前記カメラ部に設けられていてもよい。この場合、口腔カメラシステムは、カメラ部以外の他の機器を含まずに構成することができる。つまり、この場合の口腔カメラシステムは、従来技術における口腔カメラに音声センサ、音声認識部、画像処理部のすべてを追加したものとなる。この場合には、上述した静止画像データに対する画像処理は、口腔カメラ部内で実行されることになるが、画像処理のなされた静止画像データは、口腔カメラシステムとしての口腔カメラ部の中の記録媒体に記録されるようになっていても、口腔カメラ部外の他の機器の内部の記録媒体に記録されるようになっていても良い。
また、口腔カメラシステムは、音声センサ、音声認識部、画像処理部のうちの任意のもの、或いはそれらのすべてがカメラ部以外の他の機器に組み込まれるようになっていても良い。他の機器が存在する場合、口腔カメラシステムは、カメラ部とその他の機器との組合せにより構成されることになる。この場合、他の機器は１つとは限らない。
例えば、前記音声センサが、前記カメラ部に設けられていてもよい。他方、音声センサは、カメラ部の外に存在していても良い。音声センサが他の機器に存在する場合における音声センサは、それ単体で独立した装置として成立しているマイクロフォンであっても良いが、スマートフォンやタブレット等の可搬の機器に組み込まれたマイクロフォンであっても良い。その場合、音声センサが生成した音声信号は、カメラ部或いは他の機器内にある音声認識部に送られることになる。
また、前記音声センサと、前記音声認識部とが、前記カメラ部に設けられていてもよい。この場合、音声認識部が認識した指示音声は、カメラ部内或いはカメラ部外の他の機器内の画像処理部に送られることになる。
また、本願発明における口腔カメラシステムは、前記カメラ部と通信可能であり、且つ情報処理を行うコンピュータ、及び静止画像データを記録するデータ記録部を備えている情報処理装置を含んでいてもよい。情報処理装置は、上述した他の機器に相当するものであり、典型的にはスマートフォン、或いはタブレットである。この場合、前記音声センサが、前記情報処理装置に設けられていてもよい。情報処理装置に音声センサが設けられている場合、音声センサが生成した音声信号は、カメラ部或いは情報処理装置内の音声認識部に送られるようになっている。
口腔カメラシステムに情報処理装置が含まれる場合、前記音声センサと、前記音声認識部とが、前記情報処理装置に設けられていても良く、前記音声認識部の機能が、前記コンピュータによって実現されるようになっていてもよい。この場合、音声認識部が認識した指示音声は、カメラ部内或いは情報処理装置内の画像処理部に送られることになる。
前記音声センサと、前記音声認識部と、前記画像処理部とが、前記情報処理装置に設けられており、前記音声認識部と、前記画像処理部との機能が、前記コンピュータによって実現されるようになっていてもよい。この場合のカメラ部は、従来における口腔カメラであっても構わない。
【０００９】
本願発明の口腔カメラシステムにおける前記画像処理部は、前記音声認識部で認識された前記指示音声に基づく情報を、前記静止画像データに対して付加するようになっていてもよい。
従来は、保存された静止画像データに対して、ユーザが手入力で、静止画像に写り込んでいる歯がどの歯であるかという情報と、場合によっては当該歯がどちらの方向から撮像されているかを特定する情報を、例えばファイル名として入力する。画像処理部が、音声認識部で認識された指示音声に基づく情報を静止画像データに対して付加するようになっていれば、保存された静止画像データに付加された指示音声に基づく情報によって、ユーザが手入力で上述の情報を入力しなくとも、保存された静止画像データに写り込んだ歯がどの歯であるか、またその歯がどちらの方向から撮像されているかを、ユーザが把握できるようになる。なお、音声認識部で認識された指示音声に基づく情報は、静止画像に写り込んでいる歯がどの歯であるかという情報だけでも良く、それでも一定の効果がある。
なお、指示音声に基づく情報は、例えば、静止画像中にテキストで表示しても良いし、静止画像データのファイル名その他のプロパティに付加されても良い。
【００１０】
本願発明の口腔カメラシステムは、前記静止画像データを記録することができるデータ記録部を備えていてもよい。データ記録部は、カメラ部に設けられていても良いし、他の機器、例えば上述した情報処理装置に設けられていても良い。前記画像処理部は、必要に応じて所定の角度だけ前記静止画像を回転させる画像処理を行った後の前記静止画像データを前記記録部に記録するようになっていてもよい。
【００１１】
前記画像処理部は、予め定められた前記指示音声のいずれかを特定するデータである複数の指示音声データと、前記静止画像を回転させる角度を特定するデータである角度データとを、互いに紐付けた状態で記録する角度データ記録部と、前記音声認識部で認識された前記指示音声についてのデータを受取った場合に、当該指示音声についてのデータと同じ前記指示音声データと紐付けられた前記角度データを前記角度データ記録部から読出すとともに、前記撮像素子が生成した静止画像データに対して、前記角度データ記録部から読出した前記角度データに対応した角度だけ前記静止画像を回転させる画像処理を行う画像回転部と、を備えていてもよい。
例えば、本願発明の口腔カメラシステムを用いて右上の歯を撮像する場合、左上の歯を撮像する場合、右下の歯を撮像する場合、左下の歯を撮像する場合のカメラ部の向きを、頬側から撮像する場合と、舌側から撮像する場合とに分けて、予め定めておき、ユーザがその取極めに従って撮像を行うと仮定する。そうすると、例えば、右上の歯を頬側から撮像する場合におけるカメラ部の向きと、右上の歯との相対的な位置関係が一意に定まり、それにより、右上の歯を頬側から撮像することによって得られる静止画像データによって特定される静止画像中の歯の向きと、その静止画像をユーザが見たときに直感的にその歯がどの方向から撮影されたかを理解できるその静止画像の向き（角度）が一意に定まる。そのような関係性にしたがって決定された、複数の指示音声データと、指示音声データのそれぞれと対応付けられた静止画像を回転させる角度を特定するデータである角度データとを角度データ記録部に記録しておくとともに、画像回転部が音声認識部から受取った指示音声についてのデータと同じ指示音声データと紐付けられた角度データを角度データ記録部から読出し、読出した角度データに対応した角度分だけ静止画像を回転させるような画像処理を静止画像データに対して行うことで、演算を要する複雑な画像処理を実行することなく、ユーザにとって直感的な理解の可能な静止画像についての静止画像データを生成できるようになる。
【００１２】
なお、本願発明者は、以上で説明したカメラ部及び情報処理装置をも本願発明の一形態として提案する。これらの効果は既に述べた本願発明による口腔カメラシステムの効果に等しい。
【００１３】
本願発明者は、また、本願発明の他の態様として、以下の発明をも提案する。以下の発明は、ここまでで説明した発明とは、その課題も解決手段も異なる。以下の発明は、ここまで説明した発明とは、いわば完全に別発明といえる発明である。
従来は、保存された静止画像データにはその静止画像データによる静止画像に写り込んだ歯を特定するための情報が付されていない。したがって、ユーザは、何らの工夫もしなければ、ある静止画像データによる静止画像を後から確認しようとしたときには、その静止画像がどの歯に対応するものであるかを理解できない。そのような事態が生じないように、歯科医その他のユーザは、撮像した静止画像データに対して、ユーザが手入力で、静止画像に写り込んでいる歯がどの歯であるかという情報を、例えばファイル名として入力している。このような入力は面倒であり、ユーザの負担となる。他の態様としての本願発明は、このようなユーザの面倒を解決することを課題とするものである。
【００１４】
本願発明は、口腔内に挿入可能な挿入部と、口腔内の静止画像を少なくとも撮像し、静止画像についての静止画像データを生成することができるようにされている撮像素子とを備えた、手持ち可能なカメラ部と、前記カメラ部の撮像素子で撮像されている歯を歯単体として特定する情報を含む音声である詳細指示音声を捉え、捉えた詳細指示音声に応じた信号である詳細音声信号を生成する音声センサと、前記音声センサで生成された詳細音声信号に基づき前記詳細指示音声を自動的に認識する音声認識部と、前記音声認識部で認識された前記詳細指示音声に基づく情報を、前記静止画像データに対して付加するデータ付加部と、を備えている、口腔カメラシステムである。
この口腔カメラシステムは、音声センサ、音声認識部を備える。これらは、この発明とは別発明である上述の発明におけるそれらと変わらない。ただし、音声センサが捉えるのは、静止画像データの撮像している歯を１本単位で特定する詳細指示音声である。詳細指示音声は、指示音声についての説明で上述した通り、例えば、「右上４番（１の４）」、「左下４番（４の４）」等といったものである。
この発明では、かかる詳細指示音声を捉えた音声センサが生成した音声信号を音声認識部で解析して、その解析結果を、静止画像についての静止画像データに自動的に付加する。歯科医その他のユーザが、静止画像を撮像し当該静止画像についてのデータである静止画像データに自動的にその静止画像に写り込んでいる歯がどの歯であるか、という情報が付加されていれば、ユーザが静止画像データのファイルにその静止画像データによる静止画像に写り込んでいる歯がどの歯であるかを入力する手間が省けて大変に便利である。つまり、ユーザは、手入力によって静止画像データによる静止画像に写っている歯を特定する情報の入力という面倒から解放される。
なお、音声認識部で認識された指示音声に基づく情報は、静止画像に写り込んでいる歯がどの歯であるかという情報だけでも十分である。歯科医であれば、静止画像に写り込んでいる歯が頬側から撮像されたか、舌側から撮像されたかは、静止画像を見ただけで自明であるからである。
なお、詳細指示音声に基づく情報（歯を１本単位で特定する情報、即ち、「右上４番（１の４）」、「左下４番（４の４）」といった情報）は、例えば、静止画像中にテキストで表示しても良いし、静止画像データのファイル名その他のプロパティに付加されても良い。
【００１５】
他の態様の口腔カメラシステムにおいても、前記音声センサが、前記カメラ部に設けられていてもよい。
他の態様の口腔カメラシステムにおいても、前記音声センサと、前記音声認識部とが、前記カメラ部に設けられていてもよい。
他の態様の口腔カメラシステムにおいても、前記音声センサと、前記音声認識部と、前記データ付加部とが、前記カメラ部に設けられていてもよい。
他の態様による口腔カメラシステムにおいても、前記カメラ部と通信可能であり、且つ情報処理を行うコンピュータ、及び静止画像データを記録するデータ記録部を備えている情報処理装置を含んでいるとともに、前記音声センサが、前記情報処理装置に設けられていてもよい。
他の態様による口腔カメラシステムにおいても、前記音声センサと、前記音声認識部とが、前記情報処理装置に設けられており、前記音声認識部の機能が、前記コンピュータによって実現されるようになっていてもよい。
他の態様による口腔カメラシステムにおいても、前記音声センサと、前記音声認識部と、前記データ付加部とが、前記情報処理装置に設けられており、前記音声認識部と、前記データ付加部との機能が、前記コンピュータによって実現されるようになっていてもよい。
これらについては、既に先に述べたとおりである。
【００１６】
本願発明者は、以上で説明した他の態様の口腔カメラシステムにおけるカメラ部及び情報処理装置をも本願発明の一形態として提案する。これらの効果は既に述べた他の態様の発明による口腔カメラシステムの効果に等しい。
【図面の簡単な説明】
【００１７】
【図１】第１実施形態による口腔カメラシステムを概観で示す斜視図。
【図２】図１に示した口腔カメラシステムに含まれるカメラ部の先端を拡大して示す断面図。
【図３】図１に示した口腔カメラシステムに含まれるタブレット装置に含まれるハードウエアの構成を示す図。
【図４】図１に示した口腔カメラシステムに含まれるタブレット装置内に生成される機能ブロックを示すブロック図。
【図５】変形例２による口腔カメラシステムを概観で示す斜視図。
【図６】変形例３による口腔カメラシステムを概観で示す斜視図。
【図７】変形例３による口腔カメラシステムに含まれるタブレット装置内に生成される機能ブロックを示すブロック図。
【図８】第２実施形態による口腔カメラシステムに含まれるカメラ部の先端を拡大して示す断面図。
【図９】第２実施形態による口腔カメラシステムに含まれるタブレット装置内に生成される機能ブロックを示すブロック図。
【図１０】変形例４による口腔カメラシステムを概観で示す斜視図。
【図１１】変形例１による口腔カメラシステムに含まれるカメラ部の先端を拡大して示す断面図。
【図１２】人間の歯の並び、及びそれらに付される歯科の世界で用いられる番号を説明する図。
【発明を実施するための形態】
【００１８】
以下、本発明の第１〜第２実施形態、及びそれらの変形例を、図面を参照して説明する。
なお、各実施形態、変形例の説明において、共通する対象には共通する符号を付すものとし、共通する説明は場合により省略するものとする。
また、各実施形態、及び変形例で説明した口腔カメラシステムのバリエーションは、それらの組合せにより特に矛盾が生じない場合には適宜組み合わせることが可能である。
【００１９】
≪第１実施形態≫
図１に、第１実施形態による口腔カメラシステムの概観を示す。
この実施形態における口腔カメラシステムは、カメラ部１００により構成されている。カメラ部１００は、タブレット装置２００と組合せて用いられる。
カメラ部１００は、例えば歯科医であるユーザが手に持って患者の口腔内の撮像を行うものであり、その基本的な構成は従来からある口腔カメラのそれを踏襲している。
タブレット装置２００は後述するディスプレイを備えており、口腔カメラとしてのカメラ部１００で後述のようにして撮像された動画像を略実時間でそのディスプレイに表示するようになっている。この実施形態では、タブレット装置２００は、上記動画像を略実時間で表示するディスプレイと、後述する静止画像データを記録する記録装置として機能する。
カメラ部１００とタブレット装置２００とはケーブル３００で接続されており、上述の動画像についてのデータである動画像データと後述する静止画像データとは、カメラ部１００からタブレット装置２００へとケーブル３００を介して送られるようになっている。なお、カメラ部１００とタブレット装置２００との接続は、ケーブル３００等を介しての有線接続である必要はなく、例えばＢｌｕｅｔｏｏｔｈ（商標）等による公知或いは周知の無線接続であっても良い。無線接続が行われる場合には、ケーブル３００が省略され、カメラ部１００に無線通信を行うための機構が追加される。
【００２０】
カメラ部１００は、図１と図２に示したように構成されている。図２は、第１実施形態におけるカメラ部１００の先端付近の断面図である。
カメラ部１００は、細長い本体部１２１を備えている。本体部１２１は、例えば樹脂製のケースであり、これには限られないが、ユーザが片手で把持可能な細長い形状とされている。これには限られないが、本体部１２１の先端側は、曲折されている。カメラ部１００の曲折された方向を便宜上、カメラ部１００等の「前」と称することにする。
本体部１２１は、これには限られないが断面矩形であり、且つ中空に構成されている。中空とされた本体部１２１の内部空間には、後述するように種々の部品が収納されている。
本体部１２１の先端側の前側の面には、孔１２２が穿たれている。孔１２２は、これには限られないがこの実施形態では矩形であり、図２の断面図に示したように、本体部１２１の内部空間と連通している。孔１２２の近辺、これには限られないが孔１２２の本体部１２１における基端側と先端側の縁沿いには、照明部１２３が設けられている。照明部１２３は、カメラ部１００で口腔内の撮像を行うときに必要となる照明光を口腔内に照射するためのものである。照明部１２３は、かかる照明光の照射が可能な限りどのように構成されていても構わない。
照明部１２３は、これには限られないが、この実施形態では、ＬＥＤにより構成されている。照明部１２３が放つ照明光の波長は、これには限られないがこの実施形態では可視光領域である。
【００２１】
本体部１２１には、マイクロフォン１３１が設けられている。マイクロフォン１３１は、音、特には、ユーザが発する指示音声を捉え、指示音声に応じた音声信号を生成するための公知或いは周知の音声センサである。正確に言えば、図１に表れているのはマイクロフォン１３１の振動板のみであるが、その背後には、指示音声を音声信号に変換するための公知或いは周知の構成が存在する。なお、この実施形態における指示音声は、本願発明で言う指示音声である場合もあるし、他の態様の発明における「詳細指示音声」である場合もある。追って説明する。
本体部１２１の長尺部分のたとえば前側には、例えば本体部１２１を把持したユーザが指で押し込むことのできる押し釦であるスイッチ１３２が設けられている。スイッチ１３２は、後述する静止画像データを生成するための意思表示をユーザが行うためのものであり、一般的なカメラにおけるシャッターボタンに対応するものである。そのような機能を充足できるのであれば、スイッチ１３２は押し釦式である必要はもちろんないし、また本体部１２１におけるその取り付け場所は図示した場所に限られない。
【００２２】
本体部１２１の内部空間には、図３に示したように、反射鏡１２４、レンズ１２５、撮像素子１２６、及び画像処理部１２７が収納されている。
反射鏡１２４と、レンズ１２５は、カメラ部１００で口腔内を撮像する場合における像光を撮像素子１２６の撮像面に結像させるためのものである。それが可能な限りにおいて、反射鏡１２４とレンズ１２５は、その一方が存在しなくてもよく、或いはそれら以外の光学要素が反射鏡１２４とレンズ１２５の少なくとも一方に対して付加されていても構わない。
反射鏡１２４は、鏡であり、孔１２２の奥に固定されている。反射鏡１２４は、これには限られないが、この実施形態では平面鏡である。反射鏡１２４は、像光Ｌを反射して、本体部１２１の曲折された形状に即して像光Ｌを曲折させる。
レンズ１２５は、像光を例えば拡大して、撮像素子１２６の撮像面に結像させるためのものである。レンズ１２５は、一枚でも良いが複数枚でも構わない。レンズ１２５が複数枚の場合には、それらは同じものであっても良いし、そうでなくても構わない。
撮像素子１２６は、その撮像面に受けた像光Ｌに基づいて撮像を行うためのものである。撮像素子１２６は撮像を行い、通常の状態で、動画像のデータである動画像データを生成する。これらが可能な限り、撮像素子１２６は公知又は周知のもので良い。撮像素子１２６は例えば、ＣＣＤ（Charge-Coupled Device）であり、或いはＣＭＯＳ（Complementary Metal Oxide Semiconductor Image Sensor）である。撮像素子１２６が生成する動画像データは、矩形のフレームについてのデータである、フレームデータを連続させたものである。フレームデータは、公知或いは周知の方法で、１秒間に３０フレーム、６０フレーム等の所定のフレームレートで生成される。
撮像素子１２６が撮像を行う範囲は、少なくとも動画像データを構成する１フレーム分の静止画像に１本の歯を収められる範囲である。撮像素子１２６はそれが可能な画角で、口腔内を撮像できるようになっている。
【００２３】
撮像素子１２６は、接続線１２６Ｘによって画像処理部１２７に接続されている。撮像素子１２６が生成した動画像データは、接続線１２６Ｘを介して画像処理部１２７に送られるようになっている。
画像処理部１２７は、電子回路により構成されている。画像処理部１２７は、動画像データに対して以下に説明する画像処理を行うことをその基本的な機能としている。画像処理部１２７には、接続線１２６Ｘの他に、接続線１２７Ｘ、接続線１３１Ｘ、及び接続線１３２Ｘが接続されている。接続線１２７Ｘは、上述したケーブル３００と接続されている。接続線１３１Ｘは、上述したマイクロフォン１３１と接続されている。接続線１３２Ｘは、上述したスイッチ１３２と接続されている。
【００２４】
画像処理部１２７には、主制御部１２７Ａ、音声認識部１２７Ｂ、画像回転部１２７Ｃ、角度データ記録部１２７Ｄが含まれる。これら主制御部１２７Ａ、音声認識部１２７Ｂ、画像回転部１２７Ｃ、角度データ記録部１２７Ｄは、ハードウエア的に構成されていてもよく、コンピュータプログラムの実行によって、ソフトウエア的に構成されていても良い。それらの一部がハードウエア的に、それらの残部がソフトウエア的に構成されていても良い。なお、音声認識部１２７Ｂは、画像処理部１２７内にある必要はない。
主制御部１２７Ａは、動画像データから静止画像についての静止画像データを生成する機能を有している。上述したように、画像処理部１２７には、撮像素子１２６で撮像が行われることによって撮像素子１２６で生成された動画像データが、接続線１２６Ｘを介して常時送られてくる。主制御部１２７Ａはそれを常に受取り、基本的にはその動画像データをそのまま、接続線１２７Ｘに出力するようになっている。結果として、撮像素子１２６で生成された動画像データは基本的に常時、略実時間で、接続線１２７Ｘと接続されたケーブル３００を介してタブレット装置２００に送られるようになっている。他方、主制御部１２７Ａには、スイッチ１３２が操作されたことによって生じた信号が、接続線１３２Ｘを介して入力されるようになっている。かかる信号が入力されたら、主制御部１２７Ａは、ユーザによってスイッチ１３２が押し込まれたその瞬間に、動画像データを構成する連続するフレームのデータから１フレーム分のデータを抜出すことにより静止画のデータである静止画像データを生成するようになっている。生成された静止画像データを、主制御部１２７は回転部１２７Ｂへと送るようになっている。
主制御部１２７Ａは、後述するように音声認識データを音声認識部１２７Ｂから受取る場合がある。また、主制御部１２７Ａは、後述するように、画像回転部１２７Ｃで画像処理の行われた後の静止画像データを画像回転部１２７Ｃから受取る場合がある。主制御部１２７Ａは、それらを受取った場合、画像回転部１２７Ｃで画像処理が行われた後の静止画像データに対して、音声認識データ（或いはそれに基づくデータ、以下同じ。）を付すようになっている。音声認識データの詳細、それをどのようにして主制御部１２７Ａが静止画像データに付すかについては後述する。主制御部１２７Ａは、音声認識データを付した静止画像データを、接続線１２７Ｘ、ケーブル３００を介して、タブレット装置２００へと出力するようになっている。
【００２５】
音声認識部１２７Ｂは、音声認識を行う機能を有している。カメラ部１００は上述したようにマイクロフォン１３１を備えている。マイクロフォン１３１は、上述した通り、ユーザが発した指示音声を捉えて音声信号を生成するようになっているが、その音声信号は、マイクロフォン１３１から接続線１３１Ｘを経て画像処理部１２７内の音声認識部１２７Ｂに入力されるようになっている。
音声認識部１２７Ｂは、音声信号を受取ると、ユーザが発した指示音声に対応した、或いはユーザが発した指示音声を特定するデータである音声認識データを生成するようになっている。生成された音声認識データは、画像回転部１２７Ｃ及び主制御部１２７Ａへと送られるようになっている。
【００２６】
画像回転部１２７Ｃは、上述したように、主制御部１２７Ａから静止画像データを受取るようになっている。静止画像データは、上述した通り静止画像についてのデータであるが、画像回転部１２７Ｃは、静止画像データに対して、必要に応じて静止画像を回転させる画像処理を行うものである。
この実施形態における画像回転部１２７Ｃは、これには限られないが、静止画像を回転させる画像処理を静止画像データに対して実行するにあたって、角度データ記録部１２７Ｄに記録されているデータを利用する。角度データ記録部１２７Ｄに記録されているデータの詳細、及び角度データ記録部１２７Ｄに記録されているデータをどのように画像回転部１２７Ｃが利用するかの詳細については、後述することとする。
【００２７】
次に、タブレット装置２００の構成について説明する。
タブレット装置２００は、市販のタブレットで構わない。なお、タブレット装置２００は、以下に記載する構成、機能を備えている限り、必ずしもタブレットである必要はなく、スマートフォンや、ノート型パソコン、デスクトップ型パソコン等であっても構わない。スマートフォンや、ノート型パソコンである場合においても、タブレット装置２００は市販のものであっても良い。タブレットとしては、例えば、Apple Japan合同会社が製造、販売を行うiPad（商標）シリーズを挙げることができる。スマートフォンとしては、例えば、同社が製造、販売を行うiPhone（商標）シリーズを挙げることができる。
タブレット装置２００は、ケース２１０と、ケース２１０に設けられた、これには限られないが矩形或いは略矩形のディスプレイ２２０を備えている。動画像データに基づく動画像は、後述するようにしてディスプレイ２１０に表示されるようになっている。
この実施形態では、ディスプレイ２００に表示される動画像は、後述するように、カメラ部１００から受け取った動画像データに対して何らのインテリジェントな処理も要せずに、ディスプレイ２２０に表示される。したがって、タブレット装置２００は、動画像データに基づく動画像の表示のためにはインテリジェントな処理を行うための機能を要さない。つまり、後述する静止画像データの記録の機能が必要ないのであれば、この実施形態におけるタブレット装置２００は、単なるモニタ、例えばテレビ受像機であっても構わない。
もっとも、この実施形態におけるタブレット装置２００は、これには限られないが、インテリジェントな機能を有する携帯機器とされている。
タブレット装置２００は、ケース２１０、ディスプレイ２２０の他に、例えばボタンにより構成された入力装置２３０を備えている。公知或いは周知のように、ディスプレイ２２０をタッチパネルにすることにより、ディスプレイ２２０に入力装置２３０の機能を持たせることも可能である。
なお、上述したように、タブレット装置２００は、ケーブル３００を介して、カメラ部１００から動画像データを受取るようになっている。ケーブル３００は、ＵＳＢケーブル等の規格化された適当なケーブルとすることができる。ケーブル３００を省略して、カメラ部１００からタブレット装置２００に、無線により動画像データを送信することも可能であることは上述の通りである。
【００２８】
ケース２１０内には、図３に示したような構成のハードウエアが内蔵されている。ケース２１０に内蔵されるハードウエアは、ＣＰＵ２４０Ａ、ＲＯＭ２４０Ｂ、ＲＡＭ２４０Ｃ、インターフェイス２４０Ｄ、及びこれらを互いに接続するバス２４０Ｅである。
ＣＰＵ２４０Ａは、演算を行う演算装置である。ＣＰＵ２４０Ａは、例えば、ＲＯＭ２４０Ｂに記録されたコンピュータプログラムを実行することにより、後述する処理を実行する。他の変形例実施形態でもそうであるが、タブレット装置２００内に生成される後述する機能ブロックは、コンピュータプログラムとタブレット装置２００のハードウエアとの協働によって生成される。なお、タブレット装置２００は、通話機能、電子メール機能等のスマートフォンが通常行える様々な機能を実行するものであっても良いし、この実施形態のタブレット装置２００もそのようなものであるが、ここでいうコンピュータプログラムは、タブレット装置２００を後述するように機能させるための、或いは後述する機能ブロックを生成させるためのコンピュータプログラムである。ここでは、かかるコンピュータプログラムに絞って話をする。このコンピュータプログラムは、タブレット装置２００にプリインストールされていたものであっても良いし、事後的にインストールされたものであっても良い。このコンピュータプログラムのタブレット装置２００へのインストールは、メモリカード等の所定の記録媒体を介して行なわれても良いし、ＬＡＮ或いはインターネットなどの通信回線を介して行なわれても構わない。
ＲＯＭ２４０Ｂは、ＣＰＵ２４０Ａが後述する処理を実行するために必要なコンピュータプログラムやデータを記録している。ＲＡＭ２４０Ｃは、ＣＰＵ２４０Ａが処理を行うために必要なワーク領域を提供する。また、ＲＡＭ２４０Ｃには、後述するような、音声認識データの付された画像処理後の静止画像データが記録され得る。
インターフェイス２４０Ｄは、バス２４０Ｅで接続されたＣＰＵ２４０ＡやＲＡＭ２４０Ｃ等と外部との間でデータのやり取りを行うものである。インターフェイス２４０Ｄには、上述したケーブル３００と接続される端子が接続されており、また、ディスプレイ２２０と、入力装置２３０が接続されている。インターフェイス２４０Ｄは、ケーブル３００に接続される上述の端子から動画像データ及び静止画像データを受付けるようになっている。インターフェイス２４０Ｄは、ディスプレイ２２０に動画像データを送り、また、入力装置２３０から操作信号を受取るようになっている。
【００２９】
ＣＰＵ２４０Ａがコンピュータプログラムを実行することにより、タブレット装置２００内には、図４で示されたような機能ブロックが生成される。なお、以下の機能ブロックは、上述のコンピュータプログラム単体の機能により生成されていても良いが、上述のコンピュータプログラムと、タブレット装置２００にインストールされたＯＳその他のコンピュータプログラムとの協働により生成されても良い。
生成される機能ブロックは、制御部２５０Ａ、ディスプレイ制御部２５０Ｂ、記録部２５０Ｃである。制御部２５０Ａは、インターフェイス２４０Ｄを介して動画像データ及び静止画像データを受付けるものである。
制御部２５０Ａが受付けた動画像データは、ディスプレイ制御部２５０Ｂに送られるようになっている。ディスプレイ制御部２５０Ｂは、制御部２５０Ａから受付けた動画像データをディスプレイ２２０に送り、ディスプレイ２２０に動画像データに基づく動画像を表示させるようになっている。
他方、制御部２５０Ａは、静止画像データを受付けた場合、それを記録部２５０Ｃに記録するようになっている。
また、制御部２５０Ａは、入力装置２３０から後述するような操作信号の入力がインターフェイス２４０Ｄを介してあった場合、静止画像データを記録部２５０Ｃから読み出して、それをディスプレイ制御部２５０Ｂへと送るようになっている。それを受取ったディスプレイ制御部２５０Ｂは、インターフェイス２４０Ｄを介してそれをディスプレイ２２０に送り、ディスプレイ２４０Ｄに静止画像データに基づく静止画像を表示させるようになっている。
【００３０】
以下、以上で説明した口腔カメラシステムの使用方法、及びその動作を説明する。
まず、ユーザは、口腔カメラシステムを用いるにあたり、カメラ部１００と、タブレット装置２００とをケーブル３００で接続する。
次いで、ユーザは、本体部１２１に設けられた図示せぬスイッチを操作することにより、照明部１２３を点灯させる。照明部１２３は図示せぬスイッチにより転倒するのではなく、常時点灯するようになっていても良い。
その状態で、ユーザは、カメラ部１００の先端を患者の口腔内に差込み、カメラ部１００で、患者の歯のうちユーザが撮像を望むものを、適宜の角度から撮像する。
これには限られないが、この実施形態では、各歯を撮像するときに、その歯を撮像するときにおいてユーザが守るべきカメラ部１００の角度が、ユーザがこの口腔カメラシステムを用いる場合における規則として予め定められている。もっとも、大人の人間の３２本のそれぞれについてそのような角度がそれぞれ異なるものとして定められていると、ユーザはその規則を覚えきれないという事態が生じうるため、その規則はなるべく簡易なものとした方が良い。例えば、「上顎又は下顎の右側の８本の歯を撮像する場合には、頬側からの撮像の場合も、舌側からの撮像の場合も、患者の口の左側右側に向けて、カメラ部１００の長手方向が水平を保つようにしてカメラ部１００の先端側をユーザの口腔内に挿入する」という程度の規則を予め設けユーザに対して周知しておく。同様に、「上顎又は下顎の左側の８本の歯を撮像する場合には、頬側からの撮像の場合も、舌側からの撮像の場合も、患者の口の右側左側に向けて、カメラ部１００の長手方向が水平を保つようにしてカメラ部１００の先端側をユーザの口腔内に挿入する」という規則を設ける。このような規則であれば、ユーザが覚えるべき規則は２通りで済むから、ユーザが規則を覚えることについての負担は小さい。規則はせいぜい４、５通り程度に抑えるべきである。この場合の規則の数が、本願発明の口腔カメラシステムの指示音声における「カメラ部の撮像素子で撮像されている歯が属する歯におけるグループを少なくとも特定する情報」のうちの「グループ」の数と一致する。
【００３１】
ユーザは、規則にしたがって、カメラ部１００の先端を患者の口腔内に差し込んで患者の歯を撮像する。そうすると、照明部１２３から歯に照射された照明光に基いて生じた像光Ｌは、反射鏡１２４で反射され、レンズ１２５を介して撮像素子１２６の撮像面に結像する。結像した像光を撮像素子１２６が撮像して、動画像データを生成する。既に述べたように、動画像についての動画像データは、連続するフレームについてのデータによって構成されている。
動画像データは、接続線１２６Ｘを介して画像処理部１２７に送られる。
画像処理部１２７中の主制御部１２７Ａは、動画像データを受取る。主制御部１２７Ａは、動画像データを受取ると、それをそのまま接続線１２７Ｘを介してケーブル３００へ送る。動画像データは、ケーブル３００を介して、タブレット装置２００へと送られる。
【００３２】
タブレット装置２００は、ケーブル３００と接続された端子により動画像データを受取る。動画像データは、ケーブル３００と接続された端子から、インターフェイス２４０Ｄへと送られ、インターフェイス２４０Ｄから、制御部２５０Ａへと送られる。制御部２５０Ａはそれをディスプレイ制御部２５０Ｂに送り、ディスプレイ制御部２５０Ｂは、動画像データに基づく動画像を、ディスプレイ３２０に表示する。
これにより、タブレット装置２００のディスプレイ３２０には、カメラ部１００で撮像された動画像が、略実時間で表示されることになる。ユーザは、その動画像を見ながら、自分がその時点で患者のどの歯を撮像しているかを確認することが可能となる。また、ユーザは必要に応じて、患者にもその動画像を見せることが可能である。
【００３３】
ユーザは、自らが撮像しようとする歯が、動画像内に写り込んだら、そのタイミングで、スイッチ１３２である押し釦を押し込む操作をする。そうすると、スイッチ１３２が操作されることによってスイッチ１３２で生成された信号は、接続線１３２Ｘを介して画像処理部１２７内の主制御部１２７Ａに届く。これを受取った主制御部１２７Ａは、スイッチ１３２が操作されたそのときにおける動画像データに含まれるフレームを、静止画像データとして抜出して静止画像データを生成する。静止画像データは、主制御部１２７Ａから、画像回転部１２７Ｃへと送られる。
【００３４】
他方、ユーザは、自分が撮像した歯が３２本の歯のどの歯であるかということを示す指示音声を発する。指示音声はユーザがスイッチ１３２を操作するタイミングと同時に、或いはその前後の短い時間、例えば３秒以内にユーザが発するように、これも予めユーザに周知しておく。
この実施形態ではこれには限られないが、ユーザが発する指示音声（ここでは、指示音声が、本願発明における詳細指示音声ではないものとして説明を行う。）は、撮像の対象となっている歯の属する全部の歯におけるグループと、その歯をどの方向から撮像しているかという２点を特定するものであるとする。例えば、「右上４番」とか、「左下２番」等の音声をユーザが発することにより、撮像の対象となっている歯を１本単位で特定することができる。「右上」、「左上」、「右下」、「左下」という文言に、１〜４、Ａ〜Ｄ等の他の識別子を割り当てておくことも既に説明したように可能である。また、「頬側」、「舌側」等の音声をユーザが発することにより、その歯が頬側から撮像されているか、舌側から撮像されているかが特定されることになる。
つまり、「右上４番、頬側」或いは、「左下２番、舌側」といった指示音声をユーザが発すれば、その指示音声は、撮像の対象となっている歯と、その歯をどの方向から撮像しているかという２点を特定するものとなる。もっとも、指示音声は、上述したような単語の羅列的なものではなく、「右上４番、頬側」であれば、「上顎の右側４番の歯を頬側から撮像しています」といった、文章として成立するようなものであっても良い。この実施形態では、これには限られないが、カメラ部１００で撮像される歯及びその撮像の方向の組合せは、３２本の歯のそれぞれについて、頬側又は舌側から撮像が行われる場合があり得る。したがって、指示音声は、その場合の数に対応した６４種類が存在し得る。
ユーザが発した指示音声は、マイクロフォン１３１によって捉えられる。そうすると、マイクロフォン１３１は、指示音声についての音声信号を生成する。音声信号は、接続線１３１Ｘを介して、画像処理部１２７内の音声認識部１２７Ｂへと送られる。音声認識部１２７Ｂは、音声信号に対して公知或いは周知の技術によって音声認識を行い、音声信号の元となった指示音声を特定する音声認識データを生成する。音声認識データは、これには限られないが、「右上４番、頬側」といった単語の羅列のデータで十分である。この実施形態では、上述した６４種類の指示音声のそれぞれに対応した６４種類の音声認識データが生成され得る。
生成された音声認識データは、音声認識部１２７Ｂから、主制御部１２７Ａ及び画像回転部１２７Ｃへと送られる。
【００３５】
画像回転部１２７Ｃには、上述したように静止画像データが送られて来るとともに、静止画像データと同時、或いは静止画像データが送られて来るのと幾らか前後して音声認識データが送られてくる。
画像回転部１２７Ｃは、音声認識データに基いて、静止画像データによって特定される静止画像を必要に応じて回転させる画像処理を行う。そのときに、画像回転部１２７Ｃは、角度データ記録部１２７Ｄに記録されているデータを利用する。
角度データ記録部１２７Ｄには、上述した６４種類の指示音声のそれぞれを特定するデータが記録されている。そして、指示音声に対応したデータのそれぞれには、その指示音声で特定される歯を、その指示音声で特定される方向から、上述した規則にしたがった角度のカメラ部１００によって撮像した場合に、静止画像を何°回転させればその静止画像を見たユーザが、その静止画像に写り込んだ歯が生えている位置或いは角度（例えば上顎に上から下に向けてその歯が生えているのか、下顎に下から上に向けてその歯が生えているのか）を直感的に理解できるか、という観点から決定された、静止画像を回転すべき角度を特定する角度データが記録されている。歯が撮像される場合における上述した６４通りの方法は、その方法の数に６４という明確な上限があり、且つ上述したカメラ部１００の角度についての規則をユーザが遵守している限りにおいて、そのそれぞれの場合において画像を回転させるべき角度も機械的に決定できるものであるから、角度データ記録部１２７Ｄに記録させるべき上述の如きデータを作るのは容易である。しかも、この実施形態における角度の情報は、右回り或いは左回りのいずれかに９０°（或いはその整数倍の角度）だけ静止画像を回転させる、という単純なものとなる。つまり、例えば、角度データは、「＋９０°」或いは「−９０°」といった単純なものとすることができる。
これには限られないが、この実施形態における上述した６４種類の指示音声のそれぞれを特定するデータは、音声認識部１２７Ｂで生成され得る６４種類の音声認識データのそれぞれに等しいデータであるものとする。画像回転部１２７Ｃは、音声認識部１２７Ｂから音声認識データを受取ると、その音声認識データと同じ音声認識データを角度データ記録部１２７Ｄから探し出し、探し出したその音声認識データと紐付けられていた角度データを角度データ記録部１２７Ｄから読み出す。そして、その角度データで特定される角度だけ静止画像を回転させる画像処理を、静止画像データに対して実行する。
このようにして、静止画像データに対して画像回転部１２７Ｃが画像処理を行う。
もっとも、ここまでの説明では、この実施形態による口腔カメラシステムでは、３２本の歯について頬側又は舌側から撮像が行われる場合があるということを考慮すると、撮像され得る歯の静止画像の種類が６４通りである、ということを前提に、指示音声の種類も、生成される音声認識データの種類も、角度データ記録部１２７Ｄに記録されている指示音声を特定するためのデータの種類も、６４通りであるとしていた。しかし、実際のところ、「上顎又は下顎の右側の８本の歯を撮像する場合には、頬側からの撮像の場合も、舌側からの撮像の場合も、患者の口の左側右側に向けて、カメラ部１００の長手方向が水平を保つようにしてカメラ部１００の先端側をユーザの口腔内に挿入する」という規則と、「上顎又は下顎の左側の８本の歯を撮像する場合には、頬側からの撮像の場合も、舌側からの撮像の場合も、患者の口の右側左側に向けて、カメラ部１００の長手方向が水平を保つようにしてカメラ部１００の先端側をユーザの口腔内に挿入する」という規則とが遵守されるのであれば、右上の８本の歯を頬側から撮像した場合は、それら８通りの場合の静止画像はすべて同じ角度で回転させることにより、ユーザはその静止画像に写り込んだ歯の位置或いは向きを直感的に理解できるようになる。そのような観点からすると、上述の規則が遵守される限りにおいて必要となる予め定めておくべき回転の角度は、右上の８本の歯を頬側から撮像した場合、右上の８本の歯を舌側から撮像した場合、左上の８本の歯を頬側から撮像した場合、左上の８本の歯を舌側から撮像した場合、右上の８本の歯を頬側から撮像した場合、右上の８本の歯を舌側から撮像した場合、左上の８本の歯を頬側から撮像した場合、左上の８本の歯を舌側から撮像した場合、の合計８通りとなる。これらのうち、頬側と舌側のいずれかから撮像するかという点は、同じ歯を上述の規則にのっとって上記２つの方向から撮った静止画像中に写り込んだ歯の向きが互いに異なるためまとめようがないが、右上の８本の歯、左上の８本の歯、右下の８本の歯、左下の８本の歯については、互いに区別する必要はない。
従って、上述した「右上４番、頬側」、「左下２番、舌側」といった指示音声は、歯を１本の単位まで特定せずとも良く、例えば「右上、頬側」、「左下下側」といったものとすることができる。この場合には、右上、左上、右下、左下という４つの文言が、撮像対象となっている歯の属する歯のグループを特定する情報となる。そのようにするのであれば、指示音声の種類も、生成される音声認識データの種類も、角度データ記録部１２７Ｄに記録されている指示音声を特定するためのデータの種類も、８通りとなる。もっとも、撮像している歯を一本単位で特定しないのであれば、後述するようにして画像処理を行った後の静止画像データに対して音声認識データ（或いはそれに基づくデータ）を付加したとしても、その付加されたデータによってユーザが、そのデータが付加された静止画像データによる静止画像中に写り込んでいる歯がどの歯であるかを特定できなくなる。とすれば、このような指示音声を用いる場合には、静止画像データに対して音声認識データに基づくデータを付加することには意味がなくなるので、その処理を省略すべきであろう。
なお、静止画像データに対して画像回転部１２７Ｃが行う画像処理の方法は、角度データ記録部１２７Ｄに記録された上述の如き定型的なデータに基づくものでなくても構わない。例えば、音声認識データに基いて現在撮像されている歯が上顎の歯か下顎の歯かを特定できたら、静止画像中に写り込んでいる歯と歯肉との位置関係を例えば、画像回転部１２７Ｃが画像認識により判定し、上顎の歯であれば静止画像内で歯肉が上で歯がその下に位置するように、下顎の歯であれば静止画像内で歯肉が下で歯がその上に位置するように、静止画像を回転させるように静止画像データに対して画像処理を行うというようなことも可能である。このような比較的複雑な画像処理を行うのであれば、ユーザに上述したような規則を周知させることも、ユーザが上述した規則を遵守する必要も無くなる。
いずれにせよ、画像回転部１２７Ｃは、画像処理を行った後の静止画像データを主制御部１２７Ａへと送る。
【００３６】
主制御部１２７Ａは、画像処理を行った後の静止画像データを受取る。主制御部１２７Ａは、先に受け取っていた音声認識データ（或いはそれに基づくデータ）を、画像処理後の静止画像データに付す。この実施形態における音声認識データは上述のように、「右上４番、頬側」といった単語の羅列のデータである。このようなテキストのデータである音声認識データを、主制御部１２７Ａは、静止画像データに付す。静止画像データに付される音声認識データは例えば、静止画像データのファイルのファイル名として静止画像データに付されても良いし、静止画像データのファイルの適当なプロパティの一部として静止画像データに付されても良い。もっともこれには限られず、音声認識データは、静止画像中にそのテキストが画像として書き込まれるように、静止画像データに対して画像処理を行うようなものでも良い。いずれにせよ、静止画像データに対する音声認識データ（或いは、それに基づくデータ）の付加は、ユーザがスイッチ１３２を操作した後、自動的に行われる。
なお、静止画像データに付される音声認識データに基づくデータは、音声認識データそのものでも良いが、その静止画像に写り込んでいる歯を特定する情報を含んでいるものの、静止画像に写り込んでいる歯がどちらの方向から撮像されているかという情報を含んでいないものであっても構わない。その場合、音声認識データに基づくデータは、例えば、「右上４番」とか、「左下８番」といったもので足りる。この場合、主制御部１２７Ａは、音声認識データの一部を捨て、音声認識データのうち、本願の他の態様の発明における詳細指示音声に対応するデータのみを音声認識データに付加することになる。
主制御部１２７Ａは、音声認識データが付された静止画像データを接続線１２７Ｘからケーブル３００を介してタブレット装置２００へと送る。
【００３７】
タブレット装置２００は、ケーブル３００と接続された端子により音声認識データが付された静止画像データを受取る。静止画像データは、ケーブル３００と接続された端子から、インターフェイス２４０Ｄへと送られ、インターフェイス２４０Ｄから、制御部２５０Ａへと送られる。制御部２５０Ａはそれを記録部２５０Ｃへと記録する。
これにより、記録部１２７には音声認識データが付された状態で静止画像データが記録される。
ユーザがその静止画像データに基づく静止画像を確認したくなったら、例えばファイル名や、プロパティ情報として静止画像データに付されている音声認識データを頼って自分が見たいと思っている静止画像に対応する静止画像データのファイルを探し出す。そして、ユーザは、探し出した静止画像データを入力装置２３０からの入力によって選択し、そしてその選択された静止画像データに基づく静止画像をディスプレイ２４０Ｄに写し出せという指示を入力装置２３０から入力する。かかる操作信号が入力装置２３０から入力されると、その操作信号は、インターフェイス２４０Ｄを介して制御部２５０Ａへと送られる。かかる操作信号を受取った制御部２５０Ａは、その操作信号によって特定された静止画像データを読出し、それをディスプレイ制御部２５０Ｂへと送るようになっている。静止画像データは、ディスプレイ制御部２５０Ｂから、インターフェイス２４０Ｄを介してディスプレイ２２０に送られる。それにより、ディスプレイ２４０Ｄには、静止画像データに基づく静止画像が表示される。かかる静止画像は、ユーザにとって、その歯がどの歯でありどの方向から撮像されたものであるかということが、その静止画像から直感的に理解できるものとなる。
ディスプレイ２４０Ｄに写し出された静止画像を患者に見せることも可能である。
なお、この実施形態では、タブレット装置２００は、ディスプレイ或いはモニタとしての機能と、静止画像データを記録するための記録装置としての機能しか担っていない。そしてこれらの機能は１つのタブレット装置２００で賄う必要は必ずしもない。例えば、静止画像データを記録する機能しかない第１装置に静止画像データを記録し、それとは異なる、ディスプレイを備えた第２装置のディスプレイにて静止画像データに基づく静止画像を確認することも当然に可能である。
【００３８】
なお、以上で説明した口腔カメラシステムでは、スイッチ１３２が操作されたそのときにおける動画像データに含まれるフレームを、静止画像データとして抜出して静止画像データを生成するようになっていた。つまり、以上で説明した口腔カメラシステムでは、一般的なカメラにおけるシャッターボタンと同様の機能を有するスイッチ１３２をユーザが操作することにより、静止画像データを生成するタイミング乃至静止画像を撮像するタイミングを特定することにしていた。
これに変えて、口腔カメラシステムのユーザが発声する音声（タイミング音声）により、静止画像データを生成するタイミング乃至静止画像を撮像するタイミングを特定するようにしてもよい。この変更は、他の実施形態、変形例でももちろん応用可能である。
この場合、タイミング音声は、口腔カメラシステムにおいて、予め決定されている。例えば、「シャッター」或いは「撮像」といった音声をタイミング音声とすることができる。
この場合においても、撮像素子１２６が生成した動画像データは、接続線１２６Ｘを介して画像処理部１２７に常時送られる。画像処理部１２７中の主制御部１２７Ａは、動画像データを受取ると、それをそのまま接続線１２７Ｘを介してケーブル３００を介してタブレット装置２００へと常時送られる。
上述の実施形態では、ユーザは、自らが撮像しようとする歯が、動画像内に写り込んだら、そのタイミングで、スイッチ１３２である押し釦を押し込む操作を行った。これに代えて、タイミング音声により、静止画像データを生成するタイミングを特定する場合においては、ユーザは、押し釦を押し込むのと同じタイミングでタイミング音声を発する。
ユーザが発したタイミング音声は、マイクロフォン１３１によって捉えられる。そうすると、マイクロフォン１３１は、タイミング音声についての音声信号を生成する。音声信号は、接続線１３１Ｘを介して、画像処理部１２７内の音声認識部１２７Ｂへと送られる。音声認識部１２７Ｂは、音声信号に対して公知或いは周知の技術によって音声認識を行い、音声信号の元となったタイミング音声を特定する音声認識データを生成する。音声認識データは、これには限られないが、「シャッター」、「撮像」といった単語相当のデータで十分であるし、もっと言えばその音声がタイミング音声であることを示す単なる記号に相当するデータで十分である。
生成された音声認識データは、音声認識部１２７Ｂから、主制御部１２７Ａへと送られる。そうすると、タイミング音声についての音声認識データを受取った主制御部１２７Ａは、タイミング音声が発声されたそのときにおける動画像データに含まれるフレームを、静止画像データとして抜出して静止画像データを生成する。
以後の処理は、上述の実施形態で説明したものと変わらない。
【００３９】
＜変形例１＞
変形例１の口腔カメラシステムは、ハードウエア的には、第１実施形態における口腔カメラシステムのそれと略変わらない。
異なるのは、変形例１の口腔カメラシステムは、第１実施形態における口腔カメラシステムにおけるカメラ部１００で静止画像データに対して行われていた、静止画像を回転させるような画像処理を行わないようになっているという点である。
したがって、変形例１の口腔カメラシステムにおけるカメラ部１００内に存在す画像処理部１２７には、第１実施形態の場合と異なり、主制御部１２７Ａと、音声認識部１２７Ｂのみが存在し、上述の画像処理のために必要とされる、第１実施形態では存在した画像回転部１２７Ｃ及び角度データ記録部１２７Ｄが存在しない。
変形例１のカメラシステムでは、口腔内の撮像時において生成される動画像データは、第１実施形態の場合と同様にケーブル３００を介してタブレット装置２００に送られ、第１実施形態の場合と同様にタブレット装置２００で扱われる。
他方、静止画像データには、静止画像を回転させるような処理が施されることがなく、そのままの状態で、音声認識部１２７Ｂで生成され、主制御部１２７Ａに送られた音声認識データに基づくデータが付加されるようになっている。ここで、静止画像データに付加される音声認識データに基づくデータは、静止画像データによる静止画像に写り込んでいる歯を１本単位で特定できるデータである必要があるが、その歯が撮像されたときの撮像方向を特定できるデータである必要はない。したがって、ユーザが発する指示音声は、他の態様による本願発明の口腔カメラシステムにおける「詳細指示音声」である必要がある。詳細指示音声は、「右上４番」、「左下２番」といったものであり、各歯毎にそれぞれ存在するから３２種類であり、それら３２種類の詳細指示音声に対応した３２種類の音声認識データに基づくデータのいずれかが、静止画像データに対して付加されることになる。
音声認識データが付加された変形例１における静止画像データは、第１実施形態の場合と同様に、ケーブル３００を介してタブレット装置２００に送られ、第１実施形態の場合と同様にタブレット装置２００で扱われる。
【００４０】
＜変形例２＞
変形例２の口腔カメラシステムは、第１実施形態の口腔カメラシステムと殆ど変わらない。
両者間で異なるのは、変形例２の口腔カメラシステムにおけるカメラ部１００は、マイクロフォン１３１を備えていないという点である。
変形例２の口腔カメラシステムもマイクロフォン１３１は存在しているが、変形例２におけるマイクロフォン１３１は、カメラ部１００外に独立して存在する。この実施形態におけるマイクロフォン１３１は、例えば、ユーザが身に着けることのできるマイクロフォンであり、ヘッドセットマイクとすることも可能であるが、これには限られないがこの実施形態ではピンマイクである。
変形例２のマイクロフォン１３１は、第１実施形態における接続線１３１Ｘをカメラ部１００外にまで延長した接続線１３１Ｘによってカメラ部１００内の画像処理部１２７に接続されている。
変形例２のマイクロフォン１３１の機能は第１実施形態におけるマイクロフォン１３１の機能と変わらない。変形例２のマイクロフォン１３１は指示音声を捉えて音声信号を生成し、それを接続線１３１Ｘを介して画像処理部１２７内の音声認識部１２７Ｂに送るようになっている。
変形例２による口腔カメラシステムの使用方法、動作は第１実施形態におけるそれらと変わらない。ユーザはピンマイクを例えば、自らが着ている服の襟につけなければならない、というのが殆ど唯一の変更点である。
【００４１】
＜変形例３＞
変形例３における口腔カメラシステムは、第１実施形態の口腔カメラシステムと殆ど変わらない。
両者間で異なるのは、変形例３の口腔カメラシステムにおけるカメラ部１００は、マイクロフォン１３１を備えていないという点である。
変形例３の口腔カメラシステムもマイクロフォン１３１は存在しているが、変形例３におけるマイクロフォン１３１は、変形例１の場合と同様に、カメラ部１００外に存在する。この実施形態におけるマイクロフォン１３１は、タブレット装置２００に設けられている（図６）。タブレット装置２００がマイクロフォン１３１を備えているのは極普通のことであり、タブレット装置２００が備えているマイクロフォン１３１を、変形例３では、口腔カメラシステムが備えるべきマイクロフォンとして流用する。
また、変形例３の口腔カメラシステムにおけるカメラ部１００の画像処理部１２７には、音声認識部１２７Ｂが存在しない。その代わり、音声認識部１２７Ｂは、タブレット装置２００内に存在する（図７参照）。タブレット装置２００内に存在する音声認識部１２７Ｂは、タブレット装置２００にインストールされたコンピュータプログラムにより、タブレット装置２００内に機能ブロックとして形成されることになる。
タブレット装置２００においてマイクロフォン１３１は、インターフェイス２４０Ｄと接続されている。変形例３のマイクロフォン１３１は、第１実施形態の場合と同様の機能を持ち、ユーザの発した指示音声を捉え、指示音声に対応した音声信号を生成するようになっている。音声信号は、マイクロフォン１３１からインターフェイス２４０Ｄを介して音声認識部１２７Ｂへと送られるようになっている。
変形例３における音声認識部１２７Ｂは、第１実施形態の音声認識部１２７Ｂと同様の機能を持ち、マイクロフォン１３１から受取った音声信号に対して音声認識の処理を実行し、音声認識データを生成するようになっている。変形例３の音声認識部１２７Ｂは、生成した音声認識データを、インターフェイス２４０Ｄを介してケーブル３００に出力するようになっており、ケーブル３００を介してカメラ部１００に送られるようになっている。
変形例３におけるカメラ部１００に到達した音声認識データは、ケーブル３００と接続された接続線１２７Ｘを介して画像処理部１２７内の主制御部１２７Ａと画像回転部１２７Ｃとに送られるようになっている。つまり、第１実施形態では、画像処理部１２７内に存在した音声認識部１２７Ｂから、音声認識データが、主制御部１２７Ａと画像回転部１２７Ｃとに送られるようになっていたが、変形例３では、音声認識データは、主制御部１２７Ａと画像回転部１２７Ｃとに、タブレット装置２００内の音声認識部１２７Ｂから送られるようになっている。変形例３の主制御部１２７Ａ及び画像回転部１２７Ｃにおける音声認識データの利用のされ方は、第１実施形態の場合と同様である。
つまり、変形例３の口腔カメラシステムでも、第１実施形態の場合と同様の処理を行うことができ、第１実施形態の場合と同様の効果を得られることになる。
【００４２】
なお、変形例３は音声認識部１２７Ｂをカメラ部１００の外に設ける例としても捉えることができる。
音声認識部１２７Ｂは、例えば、変形例２におけるピンマイクとしてのマイクロフォン１３１に内蔵させることも可能である。この場合、マイクロフォン１３１から、カメラ部１００へと送られるのは、音声信号ではなく、音声認識データとなる。
また、変形例３ではカメラ部１００にマイクロフォン１３１を設けないという説明を行ったが、第１実施形態の場合と同様に、カメラ部１００にマイクロフォン１３１を設けておくことが可能である。その場合には、タブレット装置２００のマイクロフォン１３１を口腔カメラシステムのマイクロフォン１３１として流用することはしない。このような場合においては、カメラ部１００に存在するマイクロフォン１３１が生成した音声信号は、第１実施形態のときのようにカメラ部１００内の画像処理部１２７に送られる代わりに、ケーブル３００を介してカメラ部１００からタブレット装置２００へと送られ、タブレット装置２００内で、インターフェイス２４０Ｄを介して、音声認識部１２７Ｂへと送られる。そして、音声認識部１２７Ｂが音声信号に基いて生成した音声認識データが、タブレット装置２００からカメラ部１００へと送り返される。タブレット装置２００からカメラ部１００に送り返された音声認識データは、変形例３で既に述べたように、第１実施形態の場合と同様の方法で、カメラ部１００内の主制御部１２７Ａ及び画像回転部１２７Ｃで利用される。
【００４３】
≪第２実施形態≫
第２実施形態の口腔カメラシステムについて説明する。
第２実施形態の口腔カメラシステムは、変形例３で説明した図６に示したものと外観上は同一である。第２実施形態の口腔カメラシステムは、変形例３の口腔カメラシステムの場合と同様に、カメラ部１００と、タブレット装置２００とを備えている。第２実施形態の口腔カメラシステムでは、カメラ部１００には、マイクロフォン１３１が存在せず、タブレット装置２００のマイクロフォン１３１を口腔カメラシステムが必要とするマイクロフォンとして流用するようになっている。
第２実施形態の口腔カメラシステムが、第１実施形態の口腔カメラシステムと大きく異なるのは、第１実施形態では、静止画像データに対して、静止画像を回転させる画像処理が行われるのがカメラ部１００内であったのに対して、第２実施形態の場合では、当該画像処理がタブレット装置２００で行われるという点である。
【００４４】
したがって、第１実施形態及び第２実施形態のカメラ部１００と、第１実施形態及び第２実施形態のタブレット装置２００とは、それぞれ異なるものとなっている。
まず、カメラ部１００について説明する。
第２実施形態のカメラ部１００は、図８に示したようなものである。第２実施形態のカメラ部１００は、第１実施形態のカメラ部１００が備えていた構成のうち、上述したようにマイクロフォン１３１を備えない。したがって、マイクロフォン１３１と接続される接続線１３１Ｘも第２実施形態のカメラ部１００は備えない。第２実施形態のカメラ部１００はまた、第１実施形態におけるカメラ部１００に存在した画像処理部１２７を備えず、また、第１実施形態における画像処理部１２７内に存在した、音声認識部１２７Ｂ、画像回転部１２７Ｃ、角度データ記録部１２７Ｄを備えない。
ただし、第１実施形態において画像処理部１２７内に存在した主制御部１２７Ａは、第２実施形態でも存在している。第２実施形態における主制御部１２７Ａの機能は、第１実施形態の場合と同様であり、撮像素子１２６から受取った動画像データを接続線１２７Ｘからケーブル３００に常時送るとともに、スイッチ１３２からの入力に基いて静止画像データを生成し、生成した静止画像データを接続線１２７Ｘからケーブル３００に送るようになっている。ただし、第１実施形態における画像処理部１２７は、画像処理後の静止画像データに対して、音声認識データを付加する処理を行わない。
第２実施形態の口腔カメラシステムでは、第１実施形態のカメラ部１００から省略された音声認識部１２７Ｂ、画像回転部１２７Ｃ、角度データ記録部１２７Ｄと、第１実施形態の主制御部１２７Ａから省略された静止画像データに音声認識データを付加する機能は、タブレット装置２００に移されることになる。
【００４５】
第２実施形態におけるタブレット装置２００は、ハードウエア的には、マイクロフォン１３１を備えていることを除けば、第１実施形態のタブレット装置２００と同じである。
第２実施形態におけるタブレット装置２００の内部には、コンピュータプログラムを実行することによって、図９に示したような機能ブロックが生成されている。
第２実施形態におけるタブレット装置２００の内部には、第１実施形態の場合と同様に、制御部２５０Ａ、ディスプレイ制御部２５０Ｂ、記録部２５０Ｃが存在する。また、第２実施形態におけるタブレット装置２００の内部には、第１実施形態の場合には存在しなかった、音声認識部１２７Ｂ、画像回転部１２７Ｃ、角度データ記録部１２７Ｄが存在している。
【００４６】
制御部２５０Ａ、ディスプレイ制御部２５０Ｂ、記録部２５０Ｃのうちディスプレイ制御部２５０Ｂ、記録部２５０Ｃの機能は、第１実施形態におけるそれらの機能と変わらない。
他方、第２実施形態におけるタブレット装置２００における制御部２５０Ａは、第１実施形態における制御部２５０Ａが備えていた機能、即ち、カメラ部１００からケーブル３００を介してタブレット装置２００が受取った動画像データをインターフェイス２４０Ｄを介して受取り、それをディスプレイ制御部２５０Ｂに送る機能と、入力装置３３０からの入力にしたがって、記録部２５０Ｃに記録されていた画像処理後の静止画像データを読出し、それをディスプレイ制御部２５０Ｂに送る機能とを有しているが、その他の点で第１実施形態における制御部２５０Ａとはその機能が異なる。第１実施形態の制御部２５０Ａは、タブレット装置２００から、ケーブル３００を介して音声認識データが付された画像処理後の静止画像データを受取るようになっていたが、第２実施形態の制御部２５０Ａが、タブレット装置２００からケーブル３００、インターフェイス２４０Ｄを介して受取るのは、画像処理がなされていない制御部２５０データである。制御部２５０は、画像処理がなされていない静止画像データを受取ったら、それを画像回転部１２７Ｃへと送るようになっている。
また、制御部２５０Ａは、画像回転部１２７から、画像処理後の静止画像データを受取るようになっているとともに、音声認識部１２７Ｂから音声認識データを受取るようになっている。制御部２５０はこれらを受取ったときに、画像処理後の静止画像データに音声認識データを付す処理を行うようになっている。この処理は、第１実施形態における主制御部１２７Ａで実行された処理に倣うことができる。つまり、第１実施形態のカメラ部１００における主制御部１２７Ａで省略された上述の処理は、第２実施形態では、タブレット装置２００の制御部２５０Ａに移されている。第２実施形態の制御部２５０Ａは、自らが音声認識データを付した静止画像データを、記録部２５０Ｃに記録するようになっている。
【００４７】
上述したように、第２実施形態におけるタブレット装置２００の内部には、音声認識部１２７Ｂ、画像回転部１２７Ｃ、角度データ記録部１２７Ｄが存在している。これらの機能は、それらが第１実施形態の場合にはカメラ部１００内に存在し、第２実施形態の場合にはそれらがタブレット装置２００の中に存在するということを除いて、第１実施形態におけるそれらと同様である。
第２実施形態における音声認識部１２７Ｂは、変形例３の場合と同様に、タブレット装置２００が備えるマイクロフォン１３１から音声信号を受取り、音声信号に対して音声認識の処理を行うことにより、音声認識データを生成する。生成した音声認識データを、音声認識部１２７Ｂは、制御部２５０と画像回転部１２７Ｃへと送るようになっている。
第２実施形態における画像回転部１２７Ｃは、制御部２５０から画像処理前の静止画像データを、音声認識部１２７Ｂから音声認識データを、それぞれ受取るようになっている。それらを受け取ったら、第２実施形態における画像回転部１２７Ｃは、第１実施形態における画像回転部１２７Ｃが行ったのと同様の処理により、静止画像データに対して画像処理を行う。そのとき、第２実施形態における画像回転部１２７Ｃは、第１実施形態における画像回転部１２７Ｃがそうしたように、角度データ記録部１２７Ｄに記録されていたデータを利用する。第２実施形態における角度データ記録部１２７Ｄに記録されているデータは、第１実施形態における角度データ記録部１２７Ｄに記録されていたデータと同じものとすることが可能であり、これには限られないが第２実施形態ではそうされている。
【００４８】
第２実施形態における口腔カメラシステムの使用方法、動作について説明する。
第２実施形態における口腔カメラシステムでも、第１実施形態の場合と同様にして、カメラ部１００で患者の口腔内の撮像を行う。
スイッチ１３２が操作されていないときには、カメラ部１００からタブレット装置２００に常時動画像データが送られ、タブレット装置２００のディスプレイ３２０には常時、動画像データに基づく動画像が表示される。これは、第１実施形態、第２実施形態で変わりがない。
他方、スイッチ１３２が操作されて信号が入力された場合には、第２実施形態のカメラ部１００では静止画像データが生成される。静止画像データを生成するのは、第１実施形態の場合と変わらず、主制御部１２７Ａである。主制御部１２７Ａで生成された静止画像データは、画像処理が行われない状態で、つまり静止画像データによる静止画像が回転させられていない状態で、カメラ部１００からタブレット装置２００にケーブル３００を介して送られる。
【００４９】
静止画像データは、タブレット装置２００内で、制御部２５０Ａに至る。制御部２５０Ａは、受取った画像処理前の静止画像データを、画像回転部１２７Ｃへと送る。
他方、スイッチ１３２を操作するタイミングと同時或いはそれに前後して、ユーザは指示音声を発する。これにより、タブレット装置２００のマイクロフォン１３１は音声信号を生成する。音声信号は音声認識部１２７Ｂへと送られる。音声信号を受取った音声認識部１２７Ｂは、音声信号に基づき、音声認識データを生成する。音声認識データは、音声認識部１２７から、制御部２５０Ａと画像回転部１２７Ｃへと送られる。
これにて、画像回転部１２７Ｃに静止画像データと、音声認識データとが揃う。第２実施形態の画像回転部１２７Ｃは、第１実施形態における画像回転部１２７Ｃが、それら２つのデータを受取ったときに行ったのと同様の方法で、角度データ記録部１２７Ｄに記録されていたデータを利用して、静止画像データに対して静止画像を必要に応じて回転させる画像処理を行う。そして、画像回転部１２７Ｃは、画像処理後の静止画像データを、制御部２５０Ａへと送り返す。
そして、制御部２５０Ａは、画像処理後の静止画像データに対して、先に受け取っていた音声認識データを付す。制御部２５０Ａは、音声認識データの付された静止画像データを記録部２５０Ｃに記録する。記録部２５０Ｃに記録された静止画像データは、第１実施形態の場合と同様に、ディスプレイ３２０に当該静止画像データに基づく静止画像を表示させる等の利用が可能である。
【００５０】
＜変形例４＞
変形例４の口腔カメラシステムは、第２実施形態の口腔カメラシステムと基本的に同じである。
異なるのは、第２実施形態の口腔カメラシステムでは、タブレット装置２００が備えているマイクロフォン１３１を、口腔カメラシステムが備えるべきマイクロフォンとして流用していたのに対して、変形例４の口腔カメラシステムでは、変形例２の場合のように、単独で成立しうるマイクロフォン１３１を口腔カメラシステムが備えるべきマイクロフォンとして別に備えているという点である（図１０）。
変形例４では、マイクロフォン１３１は、変形例３で説明したように例えばピンマイクである。
変形例４では、マイクロフォン１３１は、タブレット装置２００と、ケーブル１３１Ｘで接続されている。マイクロフォン１３１は、第２実施形態の場合と同様の音声信号を生成するようになっている。第２実施形態で、タブレット装置２００に設けられていたマイクロフォン１３１から、タブレット装置２００内の音声認識部１２７Ｂに対して音声信号が送られるようになっていたのと同様に、変形例４では、タブレット装置２００外のマイクロフォン１３１で生成された音声信号が、ケーブル１３１Ｘを介してタブレット装置２００に送られ、タブレット装置２００内の音声認識部１２７Ｂに送られるようになっている。
他の点では、第２実施形態における口腔カメラシステムと変形例４の口腔カメラシステムとの間に実質的な違いはない。
【符号の説明】
【００５１】
１００  カメラ部
１２１  本体部
１２２  孔
１２６  撮像素子
１２７  画像処理部
１２７Ａ  主制御部
１２７Ｂ  音声認識部
１２７Ｃ  画像回転部
１２７Ｄ  角度データ記録部
２００  タブレット装置
２２０  ディスプレイ
２５０Ａ  制御部
２５０Ｂ  ディスプレイ制御部
２５０Ｃ  記録部
【図１】
2019141582.tif 000003
【図２】
2019141582.tif 000004
【図３】
2019141582.tif 000005
【図４】
2019141582.tif 000006
【図５】
2019141582.tif 000007
【図６】
2019141582.tif 000008
【図７】
2019141582.tif 000009
【図８】
2019141582.tif 000010
【図９】
2019141582.tif 000011
【図１０】
2019141582.tif 000012
【図１１】
2019141582.tif 000013
【図１２】
2019141582.tif 000014