(57)【要約】【課題】入力音声信号と入力音声信号を変換した他言語の音声信号とを多重化したファイル作成におけるユーザの利便性を向上する。【解決手段】入力音声信号を入力音声信号の言語とは異なる言語の音声信号に変換する変換部と、入力音声信号と変換部で変換された音声信号とを多重化する音声多重化部と、音声多重化部で多重化された信号を記録する記憶部と、を備える。【選択図】図１
2011087188.tif 000002
【特許請求の範囲】
【請求項１】
入力音声信号を前記入力音声信号の言語とは異なる言語の音声信号に変換する変換部と、
前記入力音声信号と前記変換部で変換された音声信号とを多重化する音声多重化部と、
前記音声多重化部で多重化された信号を記録する記憶部と、
を備えることを特徴とする携帯端末装置。
【請求項２】
前記入力音声信号と同期して動画像信号を入力し、前記音声多重化部で多重化された音声信号に対し、前記動画像信号を多重化する音声・動画像多重化部をさらに備え、
前記記憶部は、前記音声・動画像多重化部で多重化された信号を記録することを特徴とする請求項１記載の携帯端末装置。
【請求項３】
前記音声多重化部で多重化された音声信号をエンコードする音声エンコーダと、
前記動画像信号をエンコードする動画像エンコーダと、
を備え、
前記音声・動画像多重化部は、前記音声エンコーダの出力信号と前記動画像エンコーダの出力信号とを多重化することを特徴とする請求項２記載の携帯端末装置。
【請求項４】
前記変換部は、
前記入力音声信号を解析して文字列として単語単位に切り出す音声認識処理部と、
前記音声認識処理部で切り出した文字列を解析し、指定した言語において意味の通る文章となるような文字データを生成する言語解析処理部と、
前記言語解析処理部で生成した文字データを、前記指定した言語の文字データに変換し、この変換された文字データを元に前記入力音声信号の言語とは異なる言語の音声信号を生成する言語変換処理部と、
を備えることを特徴とする請求項１記載の携帯端末装置。
【請求項５】
携帯端末装置が音声を録音する方法であって、
入力音声信号を前記入力音声信号の言語とは異なる言語の音声信号に変換するステップと、
前記入力音声信号と前記変換された音声信号とを多重化するステップと、
前記多重化された音声信号を記録するステップと、
を含むことを特徴とする音声録音方法。
【請求項６】
前記入力音声信号と同期して動画像信号を入力し、前記多重化された音声信号に対し、前記動画像信号を多重化するステップをさらに含み、
前記記録するステップにおいて、前記多重化された音声信号に対し、さらに前記動画像信号を多重化した信号を記録することを特徴とする請求項５記載の音声録音方法。
【請求項７】
携帯端末装置を構成するコンピュータに、
入力音声信号を前記入力音声信号の言語とは異なる言語の音声信号に変換する処理と、
前記入力音声信号と前記変換された音声信号とを多重化する処理と、
前記多重化された音声信号を記録する処理と、
を実行させるプログラム。
【請求項８】
前記入力音声信号と同期して動画像信号を入力し、前記多重化された音声信号に対し、前記動画像信号を多重化する処理をさらに実行し、
前記記録する処理において、前記多重化された音声信号に対し、さらに前記動画像信号を多重化した信号を記録することを特徴とする請求項７記載のプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末装置および音声録音方法ならびにプログラムに係り、特に、携帯端末装置における音声録音技術に係る。
【背景技術】
【０００２】
今般、携帯電話機において動画撮影や音声録音などの多機能が進展している。さらに、異国語で会話をする必要が生じたとき、携帯電話機を通訳機として使用可能とすると共に、録音メッセージを文字として確認したり、録音した英単語の意味を話言葉として聞き取ることなどを可能とした携帯電話機が、特許文献１において開示されている。
【０００３】
特許文献１に記載の携帯電話機によれば、受信した通話相手の第一の言語による音声データを第一の言語による文字データに変換し、第一の言語による文字データを、第一の言語と第二の言語との対応関係を示す辞書データに基づき第二の言語による文字データに置き換え、第二の言語による文字データを第二の言語による音声データに変換し、第二の言語による音声データを出力する制御を行い、また、入力された第一の言語による音声データを第一の言語による文字データに変換し、第一の言語による文字データを、第一の言語と第二の言語との対応関係を示す辞書データに基づき第二の言語による文字データに置き換え、第二の言語による文字データを第二の言語による音声データに変換し、音声データを通話相手に送信する制御を行うため、異国語で会話をする必要が生じたとき、携帯電話機を通訳機として使用することができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−２１８０１６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
以下の分析は本発明において与えられる。
【０００６】
ユーザが携帯電話機を用いて気楽に動画撮影や音声録音を行うことが可能になり、それに伴い、ユーザが用途に応じて記録した音声などを編集・加工をするといったニーズも高まっている。ところで、音声多重化の記録ファイルを作成するためには、撮影時に記録した音声信号とは別に、多重化したい音声信号をユーザが用意し、更に音声分離処理→デコード→再エンコード→再多重化といった処理が必要になり、手間がかかる。
【０００７】
例えば、入力音声信号の言語とは異なる他言語の音声信号を録音する際に、入力音声信号と共に多重化したファイルを記録したい場合、撮影終了後に、ユーザが、他言語の音声信号の準備・処理を改めて行う必要が生じる。特許文献１に記載の携帯電話機は、他言語の音声信号の生成を可能とするものの、入力音声信号と他言語の音声信号とを多重化したファイルを記録することはできない。
【０００８】
したがって、本発明の目的は、入力音声信号を変換した他言語の音声信号を含むように多重化したファイルを記録する携帯端末装置および音声録音方法ならびにプログラムを提供することにある。
【課題を解決するための手段】
【０００９】
本発明の１つのアスペクト（側面）に係る携帯端末装置は、入力音声信号を入力音声信号の言語とは異なる言語の音声信号に変換する変換部と、入力音声信号と変換部で変換された音声信号とを多重化する音声多重化部と、音声多重化部で多重化された信号を記録する記憶部と、を備える。
【００１０】
本発明の他のアスペクト（側面）に係る音声録音方法は、携帯端末装置が音声を録音する方法であって、入力音声信号を入力音声信号の言語とは異なる言語の音声信号に変換するステップと、入力音声信号と変換部で変換された音声信号とを多重化するステップと、多重化された音声信号を記録するステップと、を含む。
【００１１】
本発明の別のアスペクト（側面）に係るプログラムは、携帯端末装置を構成するコンピュータに、入力音声信号を入力音声信号の言語とは異なる言語の音声信号に変換する処理と、入力音声信号と変換部で変換された音声信号とを多重化する処理と、多重化された音声信号を記録する処理と、を実行させる。
【発明の効果】
【００１２】
本発明によれば、入力音声信号と入力音声信号を変換した他言語の音声信号とを多重化したファイルを記録することで、ファイル作成におけるユーザの利便性を向上することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施例に係る携帯電話機の構成を示すブロック図である。
【図２】本発明の実施例に係る携帯電話機の動作を表すフローチャートである。
【発明を実施するための形態】
【００１４】
本発明の実施形態に係る携帯端末装置は、入力音声信号を入力音声信号の言語とは異なる言語の音声信号に変換する変換部（図１の１２、１３、１５に相当）と、入力音声信号と変換部で変換された音声信号とを多重化する音声多重化部（図１の１６）と、音声多重化部で多重化された信号を記録する記憶部（図１の２１に相当）と、を備える。
【００１５】
携帯端末装置において、入力音声信号と同期して動画像信号を入力し、音声多重化部で多重化された音声信号に対し、動画像信号を多重化する音声・動画像多重化部（図１の２０）をさらに備え、記憶部は、音声・動画像多重化部で多重化された信号を記録するようにしてもよい。
【００１６】
携帯端末装置において、音声多重化部で多重化された音声信号をエンコードする音声エンコーダ（図１の１７）と、動画像信号をエンコードする動画像エンコーダ（図１の１９）と、を備え、音声・動画像多重化部は、音声エンコーダの出力信号と動画像エンコーダの出力信号とを多重化するようにしてもよい。
【００１７】
携帯端末装置において、変換部は、入力音声信号を解析して文字列として単語単位に切り出す音声認識処理部（図１の１２）と、音声認識処理部で切り出した文字列を解析し、指定した言語において意味の通る文章となるような文字データを生成する言語解析処理部（図１の１３）と、言語解析処理部で生成した文字データを、指定した言語の文字データに変換し、この変換された文字データを元に入力音声信号の言語とは異なる言語の音声信号を生成する言語変換処理部（図１の１５）と、を備えるようにしてもよい。
【００１８】
このような携帯端末装置によれば、撮影時にマイク等から入力したモノラル信号を元に、その信号を解析して、ユーザが指定した他言語に変換したモノラル信号を生成する。このマイクから入力したモノラル信号と他言語に変換したモノラル信号とを多重化して、２チャネルの音声データとして音声エンコードを行い記録する。
【００１９】
例えば、英語による講義を録音する際に、英語の音声に対応する日本語音声を多重化した記録ファイルが自動で生成される。つまり、撮影終了後に、ユーザが、入力音声信号の言語とは異なる言語の音声信号の準備・処理を改めて行う必要がなく、記録ファイル作成におけるユーザの利便性が向上する。この場合、音声エンコーダにＡＡＣ（Advanced Audio Coding）やＭＰ３（MPEG Audio Layer-3）といった汎用的なコーデックを使用することで、再生側では、通常の多重音声ファイルとして、特段の機能を追加することなく、ユーザが指定する希望の言語の音声を再生することが可能である。
【００２０】
以下、実施例に即し、図面を参照して詳細に説明する。
【実施例１】
【００２１】
図１は、本発明の実施例に係る携帯電話機の構成を示すブロック図である。図１において、携帯電話機は、マイク１１、音声認識処理部１２、言語解析処理部１３、入力デバイス１４、言語変換処理部１５、音声多重化部１６、音声エンコーダ１７、カメラ１８、動画像エンコーダ１９、音声・動画像多重化部２０、出力メモリ２１、制御部３０を備える。なお、携帯電話機は、通話機能、データ送受信機能、表示機能なども備えるが、これらに係る説明については省略する。
【００２２】
音声認識処理部１２は、ユーザから撮影開始が指示されると、マイク１１から入力したモノラルの音声信号に対して、音声認識処理を行う。ここで述べる音声認識処理は、入力した音声信号を解析し、文字列として単語単位に切り出すことを意味する。
【００２３】
言語解析処理部１３は、音声認識処理部１２で切り出した文字列を解析し、キーパッド等の入力デバイス１４などによりユーザが指定した言語において意味の通る文章となるような文字データを生成する。
【００２４】
言語変換処理部１５は、言語解析処理部１３で生成した文字データを、ユーザが指定する多重化させたい言語の文字データに変換し、更にこの他言語に変換された文字データを元にモノラルの音声信号を生成する。多重化させたい言語は、入力デバイス１４などによりユーザが指定可能であり、撮影途中であってもユーザの用途に合わせて、変換前後の言語を任意に指定可能とする。
【００２５】
音声多重化部１６は、マイク１１から入力したオリジナルのモノラル信号と言語変換処理部１５で生成したモノラル信号とを多重化した２チャネルの音声信号を生成する。
【００２６】
音声エンコーダ１７は、２チャネルの音声信号の音声エンコード処理を行う。例えば、ＡＡＣやＭＰ３などのエンコーダでは、音声多重化などの用途のために、デュアルモノエンコードのモードが定義されており、デュアルモノエンコードのモードでエンコードを行う。
【００２７】
動画像エンコーダ１９は、撮影開始時以降にカメラ１８から入力した動画像信号に対して動画像エンコードを行う。
【００２８】
音声・動画像多重化部２０は、これらエンコードした動画像データと２チャネルの音声データとを多重化し、動画音声ファイルとして出力メモリ２１に記録する。なお、出力メモリ２１に記録されている動画音声ファイルは、別途図示されないデコーダによって再現可能とされる。
【００２９】
制御部３０は、コンピュータおよびメモリなどで構成され、コンピュータがプログラムを実行することで、上記の各部あるいはこの一部の機能を実現すると共に、携帯電話機を動作させるための各機能部のタイミング制御、データ授受の制御等を行う。
【００３０】
図２は、本発明の実施例に係る携帯電話機の動作を表すフローチャートである。図２において、ユーザによって撮影開始が指示されると（ステップＳ１１）、ステップＳ１２において、マイク１１から入力したモノラルの音声信号に対して音声認識処理を行う。
【００３１】
ステップＳ１３において、音声認識で切り出された文字列を解析し、入力デバイス１４などによりユーザが指定した言語において意味の通る文章となるように文字データを生成する。
【００３２】
ステップＳ１４において、生成された文字データを、ユーザが指定する多重化させたい言語の文字データに変換し、この他言語に変換された文字データを元にモノラルの音声信号を生成する。
【００３３】
ステップＳ１５において、マイクから入力されたオリジナルのモノラル信号と生成したモノラル信号とを多重化して２チャネルの音声信号を生成し、音声エンコード処理（ステップＳ１６）を行う。
【００３４】
一方、撮影開始時以降、カメラから入力された画像信号は、動画像エンコードされ、これらエンコードされた動画像データと音声エンコード処理された２チャネルの音声データとの音声・動画像多重化を行い（ステップＳ１７）、動画音声ファイルとして出力メモリ２１に記録する（ステップＳ１８）。
【００３５】
ユーザが録画停止を指示するか、あるいは、動画像ファイルを記録するために確保される出力メモリ２１の容量が満たされ、これ以上記録できなくなれば（ステップＳ１９のＹＥＳ）、撮影を終了し、そうでなければ（ステップＳ１９のＮＯ）、ステップＳ１２に戻り動作を継続する。
【００３６】
以上のように動作する携帯電話機によれば、マイク１１から入力した音声信号とこの音声信号から変換された別の言語の音声信号とを音声多重化し、さらに撮像した動画像信号を多重化した動画音声ファイルを容易に生成することが可能となる。
【００３７】
なお、前述の特許文献等の各開示を、本書に引用をもって繰り込むものとする。本発明の全開示（請求の範囲を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の請求の範囲の枠内において種々の開示要素の多様な組み合わせないし選択が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。
【符号の説明】
【００３８】
１１  マイク
１２  音声認識処理部
１３  言語解析処理部
１４  入力デバイス
１５  言語変換処理部
１６  音声多重化部
１７  音声エンコーダ
１８  カメラ
１９  動画像エンコーダ
２０  音声・動画像多重化部
２１  出力メモリ
３０  制御部
【図１】
2011087188.tif 000003
【図２】
2011087188.tif 000004