(57)【要約】  人工知能の推奨の説明に関する技法が提供される。たとえば、本明細書に記載の１つまたは複数の実施形態は、コンピュータ実行可能コンポーネントを格納できるメモリを備え得るシステムを含むことができる。システムは、メモリに動作可能に結合され、メモリに格納されたコンピュータ実行可能コンポーネントを実行できるプロセッサも含むことができる。コンピュータ実行可能コンポーネントは、第１の特徴ベクトル、第１のクラス、および第１の説明を含む第１の訓練データセットを受け取り、第１のクラスと第１の説明を組み合わせて、第１の拡張ラベルならびに第１の特徴ベクトルおよび第１の拡張ラベルを含む第２の訓練データセットを作成する、組合せコンポーネントと、第２の訓練データセットで訓練され、第２の特徴ベクトルを分析し、第２の拡張ラベルを生成する分類器と、分類器を使用して第２の拡張ラベルを分解して、第２のクラスおよび第２の説明を生成する分解コンポーネントとを含むことができる。
2021531527.tif 000002
【特許請求の範囲】
【請求項１】
システムであって、
コンピュータ実行可能コンポーネントを格納するメモリと、
前記メモリに動作可能に結合され、前記メモリに格納された前記コンピュータ実行可能コンポーネントを実行するプロセッサとを含み、前記コンピュータ実行可能コンポーネントが、
第１の特徴ベクトル、第１のクラス、および第１の説明を含む第１の訓練データセットを受け取る訓練コンポーネントと、前記第１のクラスと前記第１の説明を組み合わせて、第１の拡張ラベルと前記第１の特徴ベクトルおよび前記第１の拡張ラベルを含む第２の訓練データセットとを作成する組合せコンポーネントと、
前記第２の訓練データセットで訓練され、第２の特徴ベクトルを分析して第２の拡張ラベルを生成する分類器と、
前記分類器を使用して、前記第２の拡張ラベルを分解して第２のクラスおよび第２の説明を生成する分解コンポーネントと
を含む、システム。
【請求項２】
前記第１の説明が、数字、テキスト文字列、画像ファイル、オーディオ・ファイル、またはビデオ・ファイルのうちの１つまたは複数を含む、請求項１に記載のシステム。
【請求項３】
処理効率を向上させるために、前記第１の説明がクラウド・ソーシング・プロセスから少なくとも部分的に提供される、請求項１に記載のシステム。
【請求項４】
前記分類器が多クラス機械学習アルゴリズムを使用して訓練される、請求項１に記載のシステム。
【請求項５】
前記多クラス機械学習アルゴリズムが、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、またはランダム・フォレスト・アルゴリズムを含む、請求項１に記載のシステム。
【請求項６】
前記第２の説明の複雑性メトリックが、ユーザに関連する複雑性能力メトリック以下である、請求項１に記載のシステム。
【請求項７】
前記第２の説明が、前記第１のデータセットに関連する分野と関係がある１つまたは複数の専門用語を使用する、請求項１に記載のシステム。
【請求項８】
コンピュータ実施方法であって、
プロセッサを使用して、メモリに記憶されたコンピュータ実行可能命令を実行し、以下の動作、すなわち、
前記プロセッサに動作可能に結合された訓練コンポーネントによって、第１の特徴ベクトル、第１のクラス、および第１の説明を含む第１の訓練データセットを受け取り、前記プロセッサに動作可能に結合された組合せコンポーネントによって、前記第１のクラスと前記第１の説明を組み合わせて、第１の拡張ラベルと前記第１の特徴ベクトルおよび前記第１の拡張ラベルを含む第２の訓練データセットとを作成することと、
前記プロセッサに動作可能に結合された推奨コンポーネントによって、前記第２の訓練データセットで訓練された分類器を使用して、第２の特徴ベクトルを分析し、第２の拡張ラベルを生成することと、
前記プロセッサに動作可能に結合された分解コンポーネントによって、前記分類器を使用して、前記第２の拡張ラベルを分解して第２のクラスおよび第２の説明を生成することと
を実行することを含む、コンピュータ実施方法。
【請求項９】
前記第１の説明が、数字、テキスト文字列、画像ファイル、オーディオ・ファイル、またはビデオ・ファイルのうちの１つまたは複数を含む、請求項８に記載のコンピュータ実施方法。
【請求項１０】
処理効率を向上させるために、前記第１の説明がクラウド・ソーシング・プロセスから少なくとも部分的に提供される、請求項８に記載のコンピュータ実施方法。
【請求項１１】
前記分類器が多クラス機械学習モデルに基づく、請求項８に記載のコンピュータ実施方法。
【請求項１２】
前記多クラス機械学習アルゴリズムが、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、またはランダム・フォレスト・アルゴリズムを含む、請求項８に記載のコンピュータ実施方法。
【請求項１３】
前記第２の説明の複雑性メトリックが、ユーザに関連する複雑性能力メトリック以下である、請求項８に記載のコンピュータ実施方法。
【請求項１４】
前記第２の説明が、前記第１のデータセットに関連する分野と関係がある１つまたは複数の専門用語を使用する、請求項８に記載のコンピュータ実施方法。
【請求項１５】
ユーザに説明を提供するためのコンピュータ・プログラム製品であって、プログラム命令が具現化されたコンピュータ可読記憶媒体を備え、前記プログラム命令が、プロセッサに、
前記プロセッサに動作可能に結合された訓練コンポーネントによって、第１の特徴ベクトル、第１のクラス、および第１の説明を含む第１の訓練データセットを受け取り、前記プロセッサに動作可能に結合された組合せコンポーネントによって、前記第１のクラスと前記第１の説明を組み合わせて、第１の拡張ラベルと前記第１の特徴ベクトルおよび前記第１の拡張ラベルを含む第２の訓練データセットとを作成することと、
前記プロセッサに動作可能に結合された推奨コンポーネントによって、前記第２の訓練データセットで訓練された分類器を使用して、第２の特徴ベクトルを分析し、第２の拡張ラベルを生成することと、
前記プロセッサに動作可能に結合された分解コンポーネントによって、前記分類器を使用して前記第２の拡張ラベルを分解して、第２のクラスおよび第２の説明を生成することと
を実行させるように前記プロセッサによって実行可能である、コンピュータ・プログラム製品。
【請求項１６】
前記第１の説明が、数字、テキスト文字列、画像ファイル、オーディオ・ファイル、またはビデオ・ファイルのうちの１つまたは複数を含む、請求項１５に記載のコンピュータ・プログラム製品。
【請求項１７】
前記分類器が多クラス機械学習モデルに基づく、請求項１５に記載のコンピュータ・プログラム製品。
【請求項１８】
前記多クラス機械学習アルゴリズムが、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、またはランダム・フォレスト・アルゴリズムを含む、請求項１７に記載のコンピュータ・プログラム製品。
【請求項１９】
前記第２の説明の複雑性メトリックが、ユーザに関連する複雑性能力メトリック以下である、請求項１５に記載のコンピュータ・プログラム製品。
【請求項２０】
前記第２の説明が、前記第１のデータセットに関連する分野と関係がある１つまたは複数の専門用語を使用する、請求項１５に記載のコンピュータ・プログラム製品。
【発明の詳細な説明】
【技術分野】
【０００１】
１つまたは複数の実施形態は、電子デバイスを使用した決定に関し、より詳細には、人工知能技術を使用した決定に関する。
【発明の概要】
【０００２】
本開示の１つまたは複数の実施形態の基本的な理解を得るために、以下に概要を提示する。この概要は、重要な要素または必須の要素を特定すること、または特定の実施形態のいかなる範囲または特許請求の範囲のいかなる範囲を線引きすることを意図したものではない。その唯一の目的は、後述する、より詳細な説明の前置きとして、概念を簡略化した形で提示することである。本明細書に記載の１つまたは複数の実施形態において、人工知能技術を使用して推奨（レコメンデーション）および説明を自律的に提供することができるシステム、コンピュータ実施方法、装置、またはコンピュータ・プログラム製品あるいはその組合せについて説明する。
【０００３】
一実施形態によれば、システムが提供される。システムは、コンピュータ実行可能コンポーネントを格納するメモリを含むことができる。システムはまた、メモリに動作可能に結合され、メモリに格納されたコンピュータ実行可能コンポーネントを実行できるプロセッサも含むことができる。コンピュータ実行可能コンポーネントは、第１の特徴ベクトル、第１のクラス、および第１の説明を含む第１の訓練データセットを受け取ることができる訓練コンポーネントと、第１のクラスと第１の説明を組み合わせて、第１の拡張ラベルと第１の特徴ベクトルおよび第１の拡張ラベルを含む第２の訓練データセットとを作成することができる組合せコンポーネントと、第２の訓練データセットで訓練され、第２の特徴ベクトルを分析することができ、第２の拡張ラベルを生成することができる分類器と、分類器を使用して第２の拡張ラベルを分解して、第２のクラスおよび第２の説明を生成することができる分解コンポーネントとを含むことができる。
【０００４】
好ましくは、本発明は、第１の説明が、数字、テキスト文字列、画像ファイル、オーディオ・ファイル、またはビデオ・ファイルのうちの１つまたは複数を含む、システムを提供する。
【０００５】
好ましくは、本発明は、処理効率を向上させるために、第１の説明がクラウド・ソーシング・プロセスから少なくとも部分的に提供される、システムを提供する。
【０００６】
好ましくは、本発明は、分類器が多クラス機械学習アルゴリズムを使用して訓練される、システムを提供する。
【０００７】
好ましくは、本発明は、多クラス機械学習アルゴリズムが、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類（extreme classification）アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、またはランダム・フォレスト・アルゴリズムを含む、システムを提供する。
【０００８】
好ましくは、本発明は、第２の説明の複雑性メトリックが、ユーザに関連する複雑性能力（complexity-capability）メトリック以下である、システムを提供する。
【０００９】
好ましくは、本発明は、第２の説明が、第１のデータセットに関連する分野と関係がある１つまたは複数の専門用語を使用する、システムを提供する。
【００１０】
１つまたは複数の例示的な実施形態によれば、コンピュータ実施方法が提供される。コンピュータ実施方法は、プロセッサに動作可能に結合された訓練コンポーネントによって、第１の特徴ベクトル、第１のクラス、および第１の説明を含む第１の訓練データセットを受け取り、プロセッサに動作可能に結合された組合せコンポーネントによって、第１のクラスと第１の説明を組み合わせて、第１の拡張ラベルと第１の特徴ベクトルおよび第１の拡張ラベルを含む第２の訓練データセットとを作成することと、プロセッサに動作可能に結合された推奨コンポーネントによって、第２の訓練データセットで訓練された分類器を使用して、第２の特徴ベクトルを分析し、第２の拡張ラベルを生成することと、プロセッサに動作可能に結合された分解コンポーネントによって、分類器を使用して第２の拡張ラベルを分解して、第２のクラスおよび第２の説明を生成することとを含む。
【００１１】
好ましくは、本発明は、第１の説明が、数字、テキスト文字列、画像ファイル、オーディオ・ファイル、またはビデオ・ファイルのうちの１つまたは複数を含む、コンピュータ実施方法を提供する。
【００１２】
好ましくは、本発明は、処理効率を向上させるために、第１の説明がクラウド・ソーシング・プロセスから少なくとも部分的に提供される、コンピュータ実施方法を提供する。
【００１３】
好ましくは、本発明は、分類器が多クラス機械学習モデルに基づく、コンピュータ実施方法を提供する。
【００１４】
好ましくは、本発明は、多クラス機械学習アルゴリズムが、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、またはランダム・フォレスト・アルゴリズムを含む、コンピュータ実施方法を提供する。
【００１５】
好ましくは、本発明は、第２の説明の複雑性メトリックが、ユーザに関連する複雑性能力メトリック以下である、コンピュータ実施方法を提供する。
【００１６】
好ましくは、本発明は、第２の説明が、第１のデータセットに関連する分野と関係がある１つまたは複数の専門用語を使用する、コンピュータ実施方法を提供する。
【００１７】
さらに１つまたは複数の例示的な実施形態によれば、コンピュータ・プログラム製品が提供される。コンピュータ・プログラム製品は、プログラム命令が具現化されたコンピュータ可読記憶媒体を含むことができる。プログラム命令は、プロセッサに、プロセッサに動作可能に結合された訓練コンポーネントによって、第１の特徴ベクトル、第１のクラス、および第１の説明を含む第１の訓練データセットを受け取り、プロセッサに動作可能に結合された組合せコンポーネントによって、第１のクラスと第１の説明を組み合わせて、第１の拡張ラベルと第１の特徴ベクトルおよび第１の拡張ラベルを含む第２の訓練データセットとを作成することと、プロセッサに動作可能に結合された推奨コンポーネントによって、第２の訓練データセットで訓練された分類器を使用して、第２の特徴ベクトルを分析し、第２の拡張ラベルを生成することと、プロセッサに動作可能に結合された分解コンポーネントによって、分類器を使用して第２の拡張ラベルを分解して、第２のクラスおよび第２の説明を生成することとを実行させるようにプロセッサによって実行可能である。
【００１８】
好ましくは、本発明は、第１の説明が数字、テキスト文字列、画像ファイル、オーディオ・ファイル、またはビデオ・ファイルのうちの１つまたは複数を含む、コンピュータ・プログラム製品を提供する。
【００１９】
好ましくは、本発明は、分類器が多クラス機械学習モデルに基づく、コンピュータ・プログラム製品を提供する。
【００２０】
好ましくは、本発明は、多クラス機械学習アルゴリズムが、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、またはランダム・フォレスト・アルゴリズムを含む、コンピュータ・プログラム製品を提供する。
【００２１】
好ましくは、本発明は、第２の説明の複雑性メトリックが、ユーザに関連する複雑性能力メトリック以下である、コンピュータ・プログラム製品を提供する。
【００２２】
好ましくは、本発明は、第２の説明が、第１のデータセットに関連する分野と関係がある１つまたは複数の専門用語を使用する、コンピュータ実施方法を提供する。
【図面の簡単な説明】
【００２３】
【図１】本明細書に記載の１つまたは複数の実施形態による、ＡＩが作成した推奨を説明と共に提供するための例示的で非限定的なシステムのブロック図である。
【図２】本開示の例示的な実施形態による、所与のデータセットの例示的な分類の図である。
【図３】本開示の例示的な実施形態による、ＡＩシステムの推奨の説明を提供するＡＩシステムの例示的な実装の図である。
【図４】本開示の例示的な実施形態による、ＡＩシステムの推奨の説明を提供するＡＩシステムの別の例示的な実装の図である。
【図５】本開示の例示的な実施形態による、代替の説明を提供するための後処理動作の例示的な図である。
【図６】本開示の例示的な実施形態による、ＡＩシステムおよびアルゴリズムの態様を動作させるための例示的なフローチャートの図である。
【図７】本開示の例示的な実施形態による、ＡＩシステムおよびアルゴリズムの態様を動作させるための別の例示的なフローチャートの図である。
【図８】本明細書に記載の１つまたは複数の実施形態を容易にすることができる例示的で非限定的な動作環境のブロック図である。
【図９】本明細書に記載の１つまたは複数の実施形態によるクラウド・コンピューティング環境の図である。
【図１０】本明細書に記載の１つまたは複数の実施形態による抽象化モデル層の図である。
【発明を実施するための形態】
【００２４】
以下の詳細な説明は単なる例示であり、実施形態または実施形態の応用もしくは用途あるいはその組合せを限定することを意図していない。さらに、前述の技術分野もしくは発明の概要のセクションまたは発明を実施するための形態のセクションに示した、いかなる明示または暗示した情報も制約されることを意図していない。
【００２５】
次に、図面を参照して１つまたは複数の実施形態を説明するが、同様の参照番号は、全体を通して同様の要素を指すために使用される。以下の説明では、説明の目的で、１つまたは複数の実施形態のより完全な理解を提供するために、多数の具体的な詳細を記載している。しかしながら、様々な場合において、１つまたは複数の実施形態がこれらの具体的な詳細なしで実施され得ることは明らかである。
【００２６】
本開示はクラウド・コンピューティングに関する詳細な説明を含むが、本明細書に記載された教示の実装はクラウド・コンピューティング環境に限定されないことを理解されたい。むしろ、本開示の実施形態は、現在知られている、または後に開発される他の任意のタイプのコンピューティング環境と組み合わせて実装することが可能である。
【００２７】
いくつかの態様において、「クラス」、「分類」、「決定」、または「推奨」という用語は、特に指定のない限り、本明細書では交換可能に使用され得る。
【００２８】
人工知能（ＡＩ）は、人間が発揮する自然知能とは対照的に、機械によって実演される知能を指すことがある。いくつかの態様において、ＡＩ技術を実際の状況またはシミュレーションされた状況あるいはその両方で利用して、個人が単独で達成でき得ることを超えて、決定の正確性、一貫性、公平性を高めることができる。しかしながら、固有のバイアス、たとえばＡＩシステムを訓練するために使用される訓練データにおけるバイアスによって、結果的にそのようなシステムが決定および推奨にバイアスをかける場合がある。さらに、このようなバイアスは、様々なＡＩアルゴリズム自体によって実施される手順によって増幅されることがある。このようなバイアスは、ＡＩシステムおよびＡＩシステムの推奨に対するユーザの信頼の低下につながることがある。したがって、ＡＩシステムの推奨および決定についての説明を提供するＡＩシステムが必要とされている。このような説明は、ＡＩシステムおよびＡＩシステムの推奨に対するユーザの信頼を高める可能性がある。
【００２９】
いくつかの態様において、説明は人間のコミュニケーションに固有である。さらに、人から人への有効な説明を構成するものに対する正式な定義を作り出すこととは対照的に、システムから人への説明に対する定義を作り出すことは困難である場合がある。たとえば、数学では、説明を正式に提供するために、証明が使用されることがある。このような証明は、合意された論理および形式論を使用して構築される場合があり、したがって、その分野で訓練された人は証明の有効性について合意することができる。しかしながら、数学的フレームワーク以外では、実際の状況において、特に非技術系の対象者に提供される非技術系の説明に対して証明形式論を使用しない場合がある。たとえば、司法制度などの公式の社会的状況においてさえも、被告が法律に違反しているかどうかを判断するために、非専門家の陪審員が利用され得る。このような非専門家は、たとえば、所与の事件における検察および弁護によってなされた非公式の議論を比較検討する際に自分の直感および経験に依存することがある。
【００３０】
いくつかの態様において、説明は、ある人物（Ａ）から別の人物（Ｂ）への伝達とすることができ、人物Ａによって行われた行動または人物Ａによってなされた決定についての正当化理由（justification）を提供することができる。その結果、十分な正当化理由により、人物Ｂによる人物Ａの意思決定能力への信頼が高まる可能性がある。この正当化は非公式に行われる場合があり、繰り返し行われる場合もある。さらに、両方の参加者は、正当化理由を伝える間、たとえば、「理解しているか？」（Ａ）または「理解している（もしくは、理解していない）」（Ｂ）の変形であるフレーズを使用して、お互いの理解を確認することができる。いくつかの実施形態において、ＡＩシステムを使用して、個人に加えてまたは個人の代わりに説明を提供することができる。このような場合、本明細書に記載されるように、人物Ａを、ＡＩシステムに置き換えるか、またはＡＩシステムで拡張することができる。
【００３１】
説明を提供する１つの手法は、ＡＩシステムが特定の推奨をどのように構築するかに関する詳細な説明を提供することを含む。このような手法は、ＡＩシステム・ビルダまたは利害関係者あるいはその両方にとって特に有益であり得る。いくつかの態様において、この手法は、デバッガが有効にされた状態でコンピュータ・アプリケーションが実行される、ＡＩ以外のコンピュータ・アプリケーションのデバッグに類似している場合がある。このようにして、システムの動作中にシステムを監視して、対象となる様々なシステム応答を検出および観察することができる。しかしながら、ＡＩシステムにおいては、コンピュータ・アプリケーションのモデル・コンポーネントが人間によって記述されず訓練によって作成されるため理解し難い場合があるので、このような手法はより困難である可能性がある。さらに、ニューラル・ネットワークなどの本質的に解釈が難しい機械学習技法に基づくモデルが関係するケースにおいて、推奨プロセスをモデル化するためのこのような解釈可能な手法を開発することは困難である場合がある。さらに、コンピュータ・アプリケーションのモデル・コンポーネントは、より広範なコンピュータ・アプリケーションのコンテキスト内で使用する必要がある場合があり、その内部の対話が、決定および説明にさらに影響を与える可能性がある。したがって、このような手法から生成される説明において、このような決定の影響を考慮する必要がある場合がある。
【００３２】
様々な実施形態において、本開示は、特定の推奨に関する説明を提供するためのシステム、方法、および装置について記載しており、このような説明は、特定の入力から独立したＡＩシステムの動作の説明とは異なる場合がある。すなわち、説明は、モデルまたはグローバル説明とは異なる場合がある。いくつかの実施形態において、本開示は、エンティティ（たとえば、内容領域専門家（subject matter expert）、または説明のコンシューマ）に、訓練データ内で有効な説明を示すことよってＡＩシステムを訓練し、この訓練を使用してシステムの推奨についての説明を生成するよう求める方法について記載している。これにより、特定のＡＩモデルおよびそれが含まれるシステムの詳細を理解しようと試みることの困難さと、この理解を人間が理解できる特定の複雑性レベルおよび分野にマッピングすることの困難さとを回避することができる。したがって、本開示の実施形態は、システムによって提供される説明がユーザの複雑性レベルおよび分野に適合する可能性を高める場合がある。さらに、追加の訓練は、訓練時間に比較的大きな負担を加えず、訓練データの全体的な精度を向上させる可能性がある。
【００３３】
具体的には、本開示は、訓練モードおよびアプリケーション・モードの２つのモードで動作することができるシステムについて記載している。訓練モードでは、システムは、特徴ベクトルに対応する分類および説明に加えて、特徴ベクトルを含む訓練データセットを入力として受け取ることができる。説明は、内容領域専門家によって提供され得る。システムはさらに、分類と説明を組み合わせて、第１の拡張ラベルを作成することができる。さらに、システムは、特徴ベクトルおよび拡張ラベルを含む別の更新済みの訓練データセットを生成する。アプリケーション・モードでは、システムは更新済みの訓練データセットで訓練された分類器を使用して、（訓練されない）実世界の特徴ベクトルを分析し、それにより対応する実世界の拡張ラベルを生成することができる。さらに、システムは、分類器を使用して実世界の拡張ラベルを分解して、実世界の特徴ベクトルに対する分類および説明を生成することができる。このようにして、システムは、所与の特徴ベクトルの実世界の分類についての説明を提供することができる。
【００３４】
いくつかの態様において、本開示の１つまたは複数の実施形態は、複雑性または分野あるいはその両方への適合を含むことができ、システム、方法、および装置によって提供される説明は、その説明が、システムを訓練している分野の専門家によって作成された場合、その分野の複雑性および技術的フレームワークに適合することができる。他の態様において、本開示の１つまたは複数の実施形態は、ＡＩシステムによる説明の精度を向上させることができる。たとえば、訓練データが正確であり、生産データを表す場合、説明の精度は高くなり得る。
【００３５】
いくつかの態様において、本明細書に記載のシステム、方法、および装置は、機械学習分類アルゴリズムから独立していてもよく、ニューラル・ネットワークを含む任意の教師あり学習分類アルゴリズムを使用できるため、この技法を広く展開可能にすることができる。たとえば、使用され得る多クラス機械学習アルゴリズムには、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、ランダム・フォレスト・アルゴリズムなどが含まれるが、これらに限定されない。
【００３６】
いくつかの実施形態において、システム、方法、および装置は、コード化および計算の観点から、実装することが比較的簡単であり、そのため実装の妨げとなり得る計算のバグが生成される可能性を低減する。
【００３７】
別の態様において、システム、方法、および装置は、コンシューマおよびエンド・ユーザを教育することができる。所与の分野に関する適切な説明を提供することの１つの課題には、訓練データセットを作成することが含まれ得る。本開示の実施形態は、ＡＩシステムが現実的にどのような種類の説明を提供できるかに関する期待値を設定する方法を可能にする。たとえば、訓練データセットを利用すると、システムにとって、特定の融資申請が拒否されるのはなぜかを説明することは、特定の写真が猫を表すのはなぜかを説明するよりも簡単な場合がある。したがって、後者の場合の説明と比較して、前者の場合の説明に関しては、顧客に様々な期待レベルを設定することができる。ＡＩシステムに顧客の期待値を正しく設定すると、システムに対する顧客の満足度が向上する可能性がある。
【００３８】
いくつかの実施形態において、システム、方法、および装置は、開示されたＡＩシステムを使用するエンティティ（たとえば、組織および会社）に審査能力の向上を提供することができる。たとえば、説明を含む訓練データセットを作成した後、内容領域専門家は特定の決定についての可能な説明を効果的に列挙してもよい。可能な説明のこのような列挙は、審査されることに対する防御に有用である。たとえば、説明は、「融資を拒否する理由として考えられるすべてのものは何か？」または「治療Ｘを処方するのはどのような状況か？」などの質問に答える働きをすることができる。このような質問は、エンティティに対する審査または審査のような手順において使用することができる。
【００３９】
いくつかの実施形態において、本開示の実施形態は、意思決定手順におけるバイアスの低減を可能にすることができる。具体的には、少なくともバイアスされた決定は、内容領域専門家が説明を用いて正当化することがより難しい可能性があるので、説明を提供することにより、訓練データにおけるバイアスを検出する可能性が高くなる。さらに、同じまたは類似の説明を有する訓練データのインスタンスは、対応する特徴空間内で互いに近接してクラスタ化する場合がある。したがって、バイアスを決定するために、このようなクラスタ化の特性に基づいて異常を検出するためのさらなるアルゴリズムが使用されることがあり、ＡＩシステムにより多くの訓練データをさらに入力する必要性を引き起こす可能性がある。
【００４０】
図１は、本明細書に記載の１つまたは複数の実施形態による、ＡＩが作成した推奨を説明と共に提供するための例示的で非限定的なシステム１００のブロック図を示す。本開示で説明するシステム（たとえば、システム１００など）、装置、またはプロセスの態様は、マシン内に具現化された、たとえば、１つまたは複数のマシンに関連付けられた１つまたは複数のコンピュータ可読媒体に具現化された、マシン実行可能コンポーネントを構成することができる。このようなコンポーネントは、たとえばコンピュータ、コンピューティング・デバイス、仮想マシンなどの１つまたは複数のマシンによって実行されると、記載した動作をマシンに実行させることができる。簡潔にするために、本明細書に記載の１つまたは複数の実施形態で使用されている同様の要素についての繰り返しの説明は省略する。
【００４１】
システム１００は、任意選択で、サーバ・デバイス、１つまたは複数のネットワーク、および１つまたは複数のデバイス（図示せず）を含み得る。システム１００はまた、メモリ１０４に記憶されたコンピュータ実行可能コンポーネントを実行する少なくとも１つのプロセッサ１０２を含み得るか、あるいはそれに関連付けられ得る。システム１００は、訓練コンポーネント１１０、推奨コンポーネント１１２、組合せコンポーネント１１４、および分解コンポーネント１１６を含むがこれらに限定されない様々なコンポーネントを結合することができるシステム・バス１０６をさらに含み得る。システム１００は、デバイスに通信可能に結合され得る任意の適切なコンピューティング・デバイスまたはコンピューティング・デバイスのセットとすることができ、その非限定的な例には、サーバ・コンピュータ、コンピュータ、モバイル・コンピュータ、メインフレーム・コンピュータ、自動化されたテスト・システム、ネットワーク記憶デバイス、通信デバイス、ウェブ・サーバ・デバイス、ネットワーク・スイッチング・デバイス、ネットワーク・ルーティング・デバイス、ゲートウェイ・デバイス、ネットワーク・ハブ・デバイス、ネットワーク・ブリッジ・デバイス、制御システム、または他の任意の適切なコンピューティング・デバイスが含まれ得るが、これらに限定されない。デバイスは、システム１００と情報を通信することができる任意のデバイス、またはシステム１００によって提供される情報を使用することができる他の任意の適切なデバイスあるいはその両方とすることができる。システム１００、コンポーネント、モデル、またはデバイスは、１つまたは複数のネットワークを介してシステム、コンポーネント、モデル、デバイスなどの間の通信を可能にする通信コンポーネント１１４を備え得ることを理解されたい。
【００４２】
前述のように、説明は、決定または行動に対する正当化理由を、あるエンティティから別のエンティティに伝えることができる。したがって、説明のコンシューマは、説明を理解できる必要がある。したがって、推奨コンポーネント１１２は、ユーザの複雑性能力に関連するメトリックに適合する、説明の複雑性に関連するメトリックを有する説明を提供するように構成され得る。このような複雑性メトリックは、たとえば、説明の複雑性およびユーザの素養に対応するスコアを含む、任意の適切な形式をとることができる。たとえば、決定の理由を明示する正確で数学的に洗練された方程式は、統計学者には適切であり得るが、非技術系の人には理解可能な説明を提供しない可能性がある。さらに、多くの状況では、より複雑であるが完全な説明よりも、単純で典型的な説明が好ましい場合がある。
【００４３】
いくつかの態様において、本明細書に記載のシステム１００の性能品質についてのメトリックは、使用するデータセット内に説明を伴わない、ベースラインの従来のシステムおよび対応する機械学習アルゴリズムによって決定された同様の分類器の精度に関連する性能メトリックと対比して、訓練コンポーネント１１０または推奨コンポーネント１１２あるいはその両方によって決定された分類器の精度に関連するメトリックを含むことができる。いくつかの態様において、システム１００および関連するアルゴリズムの精度が所与の閾値を下回る場合、システム１００の性能を向上させるためにどの程度多くの訓練データが必要であるかを決定するためには、このような説明を使用しない従来のシステムおよび機械学習アルゴリズムに比べて、より大きな訓練データセットが訓練コンポーネント１００によって使用され得る。いくつかの態様において、訓練コンポーネント１１０または推奨コンポーネント１１２あるいはその両方は、標準的な多クラス分類器と比較して精度を向上させるために、以下で説明する階層多クラス分類器を使用することができる。
【００４４】
いくつかの実施形態において、推奨コンポーネント１１２は、たとえば関連する用語を組み込むことによって、推奨の分野に合わせた説明を提供するように構成され得る。たとえば、医療の推奨の説明では、推奨を検討している医師または看護師あるいはその両方が理解できる医療用語を使用することを必要とする場合がある。対照的に、所与のＡＩシステムが生成した、たとえば「Ｘ１＞０．４５」および「Ｘ２＜４３．５」という説明によって特定の治療を推奨することは、Ｘ１およびＸ２がユーザ（たとえば、医師）にとって固有の意味を持たない場合があるので、ユーザの数学的素養に関係なくユーザにとって有用ではない可能性がある。しかしながら、「ブドウ糖の数値が高すぎ、血圧が低すぎる」ことを示す異なる説明は、ユーザにとってより有益である可能性がある。
【００４５】
いくつかの態様において、システム１００による複雑性の要件と分野の要件を適合させるという問題にさらに対処するために、機械学習訓練プロセスが、訓練プロセス中に内容領域専門家に有効な説明となるものについてシステム１００を訓練するよう求めるように構成され得るように、訓練コンポーネント１１０を構成することができる。より具体的には、訓練コンポーネント１１０に提供される訓練データの各インスタンスは、分類または決定に加えて説明を含む必要がある場合がある。いくつかの実施形態において、訓練データで使用される説明を使用して、実世界のデータについての説明を提供することができる。
【００４６】
本開示の特定の実施形態を明確にするために本明細書で参照され得るこのようなシステム１００の非限定的で例示的なユースケースには、融資申請の質問に対する回答を受け取り、融資申請を承認または拒否するための推奨を作成するシステム１００が含まれ得る。このようなシステム１００がその推奨の説明を提供するために、訓練コンポーネント１１０に提供される訓練データを、内容領域専門家が提供する説明で拡張することができる。たとえば、拒否の場合における訓練の推奨は、「給与が不十分」、「既存債務が多すぎる」、「仕事の安定性が不十分」、「住宅の安定性が不十分」、「申請が不完全」のようなテキストによる説明を含み得る。このような説明は、対象分野（たとえば、銀行の分野）に関連する場合があり、説明を利用するユーザ（たとえば、融資担当者または融資申請者あるいはその両方）の複雑性レベルを満たす場合がある。いくつかの実施形態において、システム１００は、内容領域専門家（たとえば、融資担当者または銀行職員）によって提供される訓練の説明を、新しい融資申請に対してなされた決定に関する説明の基礎として使用することができる。
【００４７】
いくつかの実施形態において、システム１００は、既存の機械分類技術を容易な方法で活用して、訓練コンポーネント１１０または推奨コンポーネント１１２あるいはその両方によって、対応する分類と共に説明を作成する分類器を生成することができる。いくつかの実施形態において、教師あり機械学習分類器を作成するために、２つのコンポーネントを有する訓練データのセットが訓練コンポーネント１１０に提供される必要があり得る。第１のコンポーネントは、特定のエンティティに対する特徴ベクトルｘのセットを含むことができる。このような特徴ベクトルの例には、画像、ビデオ、オーディオ、テキストなどが含まれ得るが、これらに限定されない。たとえば、融資申請の場合、融資に関する情報は、特徴ベクトルの一部としてテキスト形式で記述することができる。第２のコンポーネントは、各特徴ベクトルに対する決定または分類あるいはその両方ｙを含むことができる。このような決定または分類あるいはその両方の例には、画像、ビデオ、またはオーディオについての説明、テキストの段落についての要約、融資申請に対する融資承認決定などが含まれ得るが、これらに限定されない。
【００４８】
さらに、訓練コンポーネント１１０は、訓練データ内の各要素（ｘ，ｙ）について第３のコンポーネントをさらに受け取ることができる。具体的には、特徴ｘがなぜ特定のクラスｙを生成したかについての説明ｚのセットである。いくつかの実施形態において、ｚは、数字、テキスト文字列、画像、またはビデオ・ファイルなどの任意の適切な形式をとることができる。いくつかの実施形態において、各ｚは、一意の識別子で表すことができる。以下でさらに記載するように、組合せコンポーネント１１４は、ｙとｚを組み合わせて、新しいｘ入力に関するクラス（ｙ）と説明（ｚ）の両方を出力するモデルを訓練することができる。
【００４９】
いくつかの実施形態において、訓練コンポーネント１１０への入力は、訓練特徴ベクトルｘのセットを含むことができる。さらに、訓練コンポーネント１１０への入力は、各特徴ベクトルｘに対する正しいクラスのセットを含み得る分類ｙを含むことができる。さらに、訓練コンポーネント１１０への入力は、各特徴ベクトルに対応する説明ｚのセットを含むことができる。
【００５０】
いくつかの実施形態において、推奨コンポーネント１１２の出力は、分類するための実際の特徴ベクトルを含むことができ、これはｘｒｅａｌと呼ばれることがある。さらに、推奨コンポーネント１１２の出力は、各特徴ベクトルの予測されたクラスを含むことができ、これはｙｐｒｅｄｉｃｔと呼ばれることがある。最後に、各特徴ベクトルおよびクラス予測についての予測された説明であり、これはｚｐｒｅｄｉｃｔと呼ばれることがある。
【００５１】
いくつかの態様において、組合せコンポーネント１１４によって、ｙおよびｚの各インスタンスを組み合わせるかまたはマージして、一意の拡張ラベルｙｚにすることができる。次いで、任意の標準的な教師あり機械学習分類アルゴリズムなど（たとえば、サポート・ベクトル・マシン（ＳＶＭ）・アルゴリズム、最近傍（ＮＮ：nearest neighbor）アルゴリズムなど）のＡＩ技法への訓練入力として、３タプル（ｘ，ｙｚ）を使用することができる。ＡＩ技法は分類器Ｃを作成することができ、ｘは、特徴ベクトルのセットを表すことができ、拡張ラベルｙｚは、それらの特徴ベクトルに対応するクラスである。分類器Ｃは、（実世界のデータに対応する）特徴ベクトルｘｒｅａｌとして表され得る新しいデータ・インスタンスを分類し、それによってクラスｙｏｕｔｐｕｔを生成するために使用され得る。分解コンポーネント１１６において、ｙｏｕｔｐｕｔは、予測されたクラスｙｐｒｅｄｉｃｔおよび予測された説明ｚｐｒｅｄｉｃｔを作成するために、分解コンポーネント１１６を使用して、かつ上記の組合せコンポーネント１１４によって使用される逆のプロセスを使用して分解され得る。
【００５２】
いくつかの態様において、将来のｘ値に対する予測を実行するために、推奨コンポーネント１１２によって、ベースライン（ｘ，ｙ）分類器（すなわち、説明ｚのない分類器）を使用することができ、次いで、説明を作成するために、説明を含む（ｘ，ｙｚ）分類器を使用することができる。いくつかの態様において、（ｘ，ｙｚ）分類器および（ｘ，ｙ）分類器は、異なるｙ値を予測してもよい。状況によっては、ベースライン分類器を使用すると、より良い分類が可能になる場合があり、訓練コンポーネント１１０のより多くの訓練データが必要であることを知らせることができる。別の態様において、２つの分類器の不一致は、さらなる調査が必要となり得る場合を示すことがある（より多くの訓練データまたは説明クラスの改善など）。たとえば、このような場合は、同様の訓練ｘ値が２つの異なる説明ｚにマッピングされていることを示している可能性があり、したがって、ユーザまたは内容領域専門家が、システムに介入するか、またはシステムを再訓練するかあるいはその両方の必要があることを知らせることができる。いくつかの態様において、ｙｚ分類器を各クラスｙで訓練することができ、次いで、ベースラインｘｙ分類器を使用してクラスｙを見いだし、ｙｚ分類器を使用して説明ｚを見いだすことができる。このような実施形態は、分類ｙと種類ｚとの間の階層関係を必ずしも必要とせず、階層分類器（たとえば、図２または図４あるいはその両方、および関連する説明を参照）と同様とすることができる。
【００５３】
システム１００の様々なコンポーネント（たとえば、訓練コンポーネント１１０、推奨コンポーネント１１２、組合せコンポーネント１１４、分解コンポーネント１１６または他のコンポーネントあるいはその組合せ）は、直接に、または１つもしくは複数のネットワークを介して接続することができる。このようなネットワークには、セルラー・ネットワーク、ワイド・エリア・ネットワーク（ＷＡＮ）（たとえば、インターネット）、またはローカル・エリア・ネットワーク（ＬＡＮ）を含むがこれらに限定されない有線および無線ネットワークが含まれる場合があり、ネットワークの非限定的な例には、セルラー、ＷＡＮ、ワイヤレス・フィディリティ（Ｗｉ−Ｆｉ）、Ｗｉ−Ｍａｘ、ＷＬＡＮ、無線通信、マイクロ波通信、衛星通信、光通信、音波通信、または他の任意の適切な通信技術が含まれる。さらに、前述のシステムまたはデバイスあるいはその両方は、いくつかのコンポーネント間の対話に関して説明されている。このようなシステムおよびコンポーネントは、これらのコンポーネント、もしくはそのコンポーネントにおいて指定されたサブコンポーネント、指定されたコンポーネントもしくはサブコンポーネントのいくつか、または追加のコンポーネントあるいはその組合せを含み得ることを理解されたい。サブコンポーネントはまた、親コンポーネントの中に含まれず、他のコンポーネントに通信可能に結合されたコンポーネントとして実装することができる。さらに、１つもしくは複数のコンポーネントまたはサブコンポーネントあるいはその両方は、集約機能を実現する単一のコンポーネントに一体化することができる。コンポーネントはまた、簡潔にするために本明細書では特に記載されていないが当業者には知られている、１つまたは複数の他のコンポーネントと対話することもできる。
【００５４】
さらに、実行されるプロセスのいくつかは、その特定のコンテキストで様々なタイプのニューラル・ネットワークに関連する定義されたタスクを実行するための専用コンピュータによって実行することができる。主題のコンピュータ処理システム、方法、装置、またはコンピュータ・プログラム製品あるいはその組合せは、技術、コンピュータ・ネットワーク、インターネットなどの進歩を通じて生じる新しい問題を解決するために使用することができる。
【００５５】
本明細書に記載のデバイスの実施形態は、本明細書に記載の１つまたは複数の機能を自動化しやすくするために、人工知能（ＡＩ）を使用することができる。コンポーネントは、本明細書に開示される様々な実施形態／例を実施するために様々なＡＩベースの方式を使用することができる。本明細書に記載の多数の決定（たとえば、決定する、確認する、推論する、計算する、予測する、予知する、推定する、導出する、予想する、検出する、計算する）を実現または支援するために、本明細書に記載のコンポーネントは、アクセスが許可されているデータの全体またはサブセットを調べることができ、イベントまたはデータあるいはその両方を介して取り込まれた観察結果のセットから、システムの状態、環境などを推論すること、または決定することができる。決定は、たとえば、特定の状況または動作を識別するために使用することができ、あるいは諸状態にわたる確率分布を生成することができる。決定は、確率論的なもの、すなわち、データおよびイベントについての考察に基づいた、対象の諸状態にわたる確率分布の計算とすることができる。決定はまた、イベントまたはデータあるいはその両方のセットからより高いレベルのイベントを構成するために使用される技法を指すこともできる。
【００５６】
このような決定により、イベントが時間的に近接して相関しているかどうか、ならびにイベントおよびデータが１つまたは複数のイベント・ソースおよびデータ・ソースからのものかどうかの観察されたイベントまたは記憶されたイベント・データあるいはその両方のセットから、新しいイベントまたは動作を構築することになり得る。本明細書に開示されたコンポーネントは、特許請求された主題に関連した自動動作または決定された動作あるいはその両方の動作を実行することに関連して、様々な分類（（たとえば、訓練データによって）明示的に訓練される、ならびに（たとえば、挙動を観察すること、選好、履歴情報、外部情報を受け取ることなどによって）暗黙的に訓練される）方式またはシステムあるいはその両方（たとえば、サポート・ベクトル・マシン、ニューラル・ネットワーク、エキスパート・システム、ベイジアン信念ネットワーク、ファジー論理、データ・フュージョン・エンジンなど）を使用することができる。したがって、分類方式または分類システムあるいはその両方は、いくつかの機能、動作、または決定あるいはその組合せを自動的に学習および実行するために使用され得る。
【００５７】
分類器は、ｆ（ｚ）＝ｃｏｎｆｉｄｅｎｃｅ（ｃｌａｓｓ）のように、入力属性ベクトルｚ＝（ｚ１、ｚ２、ｚ３、ｚ４、…、ｚｎ）を、入力が１つのクラスに属する信頼性にマッピングすることができる。このような分類は、（たとえば、分析の有用性およびコストを要因に入れる）確率論的または統計ベースあるいはその両方の分析を用いて（たとえば、要因として分析有用性およびコストに含める）、自動的に実行されるべき動作を決定することができる。サポート・ベクトル・マシン（ＳＶＭ）は、使用できる分類器の一例であり得る。ＳＶＭは、可能な入力の空間内で超曲面を見つけることによって動作し、超曲面は、トリガ基準を非トリガ・イベントから分離しようとする。直観的に、これは、訓練データに近いが同一ではない試験データを正しく分類する。他の有向および無向モデル分類手法には、たとえば、異なる独立パターンを提供するモデルが使用され得る、ナイーブ・ベイズ、ベイジアン・ネットワーク、決定木、ニューラル・ネットワーク、ファジー論理モデル、または確率的分類モデルあるいはその組合せが含まれる。本明細書で使用されるような分類には、優先順位のモデルを開発するために利用される統計的回帰も含まれる。
【００５８】
図２は、本開示の例示的な実施形態による、所与のデータセットの例示的な分類の図を示す。具体的には、図２は、クラスＡ２０２、クラスＢ２０４、およびクラスＣ２０６の３つの分類を含む第１の図２０１を示す。図２はさらに、クラスＡ１  ２１０、クラスＡ２  ２１２、クラスＢ３  ２１４、クラスＢ４  ２１６、およびクラスＣ５  ２１８の５つの分類を含む第２の図２０３を示す。いくつかの実施形態において、図２０３は、図２０１のさらなる種別を表すことができ、それによって図２０１は、図２０３のクラスと比較して、クラスのより高いレベルの階層を表すことができる。具体的には、クラスＡ１  ２１０およびクラスＡ２  ２１２は、図２０１のクラスＡ２０２の種類を表すことができる。同様に、クラスＢ３  ２１４およびクラスＢ４  ２１６は、クラスＢ２０４の種類を表すことができる。
【００５９】
図２０１および図２０３について、例を用いてさらに説明する。たとえば、本開示によるシステムは、癌治療を推奨するように訓練され得る。このようなシステムの例示的な訓練セットは、以下のもの、すなわち（Ｐ１，ＴＡ）、（Ｐ２，ＴＡ）、（Ｐ３，ＴＡ）、（Ｐ４，ＴＡ）、（Ｐ５，ＴＢ）、（Ｐ６，ＴＢ）、（Ｐ７，ＴＢ）、および（Ｐ８，ＴＣ）を含むことができ、Ｐｉは患者ｉを表す特徴ベクトルであり、Ｔｉは様々な治療の推奨を表す。
【００６０】
したがって、上記のように、開示されたＡＩシステムおよび対応するアルゴリズムは、以下の（Ｐ１，ＴＡ，Ｅ１）、（Ｐ２，ＴＡ，Ｅ１）、（Ｐ３，ＴＡ，Ｅ２）、（Ｐ４，ＴＡ，Ｅ２）、（Ｐ５，ＴＢ，Ｅ３）、（Ｐ６，ＴＢ，Ｅ３）、（Ｐ７，ＴＢ，Ｅ４）、および（Ｐ８，ＴＣ，Ｅ５）のように、データ訓練セットに追加の説明コンポーネントＥｉを必要とする場合がある。
【００６１】
いくつかの実施形態において、各Ｅｉは、患者を表す特徴ベクトルがなぜ特定の治療にマッピングされるかを正当化する説明を表すことができる。例が示すように、いくつかの治療は、複数の説明、すなわち、なぜ特定の治療が推奨されるのかに関する複数の説明を有してよい。たとえば、治療ＴＡは、２つの異なる理由Ｅ１およびＥ２で推奨される場合があり、治療ＴＣは、理由Ｅ５でのみ推奨される場合がある。
【００６２】
この拡張された訓練データが与えられると、開示された技法は、トリプレットを、任意の所与の機械学習アルゴリズム（たとえば、任意の標準的な教師あり機械学習アルゴリズム）が使用できる形式に変換することができる。具体的には、トリプレットは、機械学習アルゴリズムが通常処理する形式（特徴、クラス）のタプルに変換され得る。この変換は、以下の（Ｐ１，Ｔ  ＥＡ１）、（Ｐ２，Ｔ  ＥＡ１）、（Ｐ３，Ｔ  ＥＡ２）、（Ｐ４，Ｔ  ＥＡ２）、（Ｐ５，Ｔ  ＥＢ３）、（Ｐ６，Ｔ  ＥＢ３）、（Ｐ７，Ｔ  ＥＢ４）、および（Ｐ８、Ｔ  ＥＣ５）ように、第２のコンポーネントと第３のコンポーネントを組み合わせて一意の新しいクラスすることによって実行することができる。
【００６３】
上記の例を考慮すると、図２は、言及した変換を適用し、開示されたアルゴリズムを使用した後、訓練データセットがどのように変化するかに関する図２０１および図２０３を示す。具体的には、図２０１は、例における８つの訓練インスタンスが３つのクラス（クラスＡ２０２、クラスＢ２０４、およびクラスＣ２０６）にマッピングされ得ることを示す。図２０３は、訓練データが変更されたとき、すなわち訓練データに説明が追加されたときの分類を示す。具体的には、クラスＡ２０２は、クラスＡ１  ２１０およびＡ２  ２１２に分解することができ、さらにクラスＢは、クラスＢ３  ２１４およびＢ４  ２１６に変換することができ、クラスＣはクラスＣ５  ２１８のままである。さらに、図２０３は、訓練データに説明を追加すると、暗黙的に２レベルの階層が作成されることを示す。すなわち、図２０３の変換されたクラスは、図２０１の元のクラスのメンバである。具体的には、クラスＡ１  ２１０およびＡ２  ２１２は、元のクラスＡ  ２０２の分解を表し、クラスＢについても同様である。この階層特性は、データを訓練して精度を向上させるときに階層分類アルゴリズムを使用することによって活用されてよい。さらに、説明は、たとえば、ユーザのニーズに応じて、複数のレベルの詳細を含むように拡張されてよい。
【００６４】
図３は、本開示の例示的な実施形態による、ＡＩシステムの推奨の説明を提供するＡＩシステムの例示的な実装の図を示す。簡潔にするために、本明細書に記載の１つまたは複数の実施形態で使用されている同様の要素についての繰り返しの説明は省略する。具体的には、図３０１は、システムの訓練コンポーネントを表すことができる。いくつかの実施形態において、訓練データセット３０２は、システムによって受け取られ得る。訓練データセット３０２は、（ｘ，ｙ，ｚ）要素を含むことができ、ｘは特徴ベクトルを表し、ｙは分類または決定を表し、ｚは説明を表す。
【００６５】
ブロック３０４において、システムは、訓練データセット３０２内のデータ項目ごとに、分類ｙを説明ｚと組み合わせ、それによって拡張ラベルｙｚを生成することができる。いくつかの態様において、拡張ラベルは、ｙとｚの連結とすることができ、またはｙとｚのより高度化された組合せ（たとえば、ハッシュ化された組合せ）としてもよい。ブロック３０６において、システムは、拡張ラベルｙｚに基づいて、更新済みの訓練データセット（ｘ，ｙｚ）を生成することができる。
【００６６】
ブロック３０８において、システムは、更新済みの訓練データセットに機械学習アルゴリズムを適用することができ、それによってモデル（たとえば、多クラス・モデル）の生成につながる。３１０において、更新済みの訓練データセット（ｘ，ｙｚ）に基づくモデルを実世界のデータに適用することができる推奨コンポーネント３０３に対して、システムの出力が使用され得る。具体的には、システムは、特徴ベクトルｘ３１２を含み得る実世界のデータを受け取ることができる。３１４において、システムは、モデル（たとえば、多クラス・モデル）を適用し、それによって分類ｙを出力として生成することができる。３１６において、システムは、生成された分類ｙに基づいて拡張ラベルｙｚを決定することができる。３１８において、システムは、ｙｚを分解し、分類ｙおよび説明ｚを生成することができる。
【００６７】
図４は、本開示の例示的な実施形態による、ＡＩシステムの推奨の説明を提供するＡＩシステムの別の例示的な実装の図を示す。簡潔にするために、本明細書に記載の１つまたは複数の実施形態で使用されている同様の要素についての繰り返しの説明は省略する。具体的には、図４０１は、システムの訓練コンポーネントを表すことができる。いくつかの実施形態において、訓練データセット４０２は、システムによって受け取られ得る。訓練データセット４０２は、（ｘ，ｙ，ｚ）要素を含むことができ、ｘは特徴ベクトルを表し、ｙは分類または決定を表し、ｚは説明を表す。ブロック４０４において、システムは、訓練データセット４０２内のデータ項目ごとに、分類ｙを説明ｚと組み合わせ、それによって拡張ラベルｙｚを生成することができる。ブロック４０６において、システムは、拡張ラベルｙｚに基づいて、更新済みの訓練データセット（ｘ，ｙｚ）を生成することができ、ｚは、クラスｙの特定の例を含む（たとえば、ｚは、ｙと階層関係にあり、クラスｙの種類を表す）。ブロック４０８において、システムは、更新済みの訓練データセットに階層機械学習アルゴリズムを適用することができ、それによって、モデル（たとえば、階層多クラス・モデル）の生成につながる。いくつかの態様において、システムによって処理されるべきクラスが多数ある場合に対応するために、１つまたは複数のエクストリーム分類アルゴリズムが使用され得る。４１０において、更新済みの訓練データセット（ｘ，ｙｚ）に基づくモデルを実世界のデータに適用できる推奨コンポーネント４０３に対して、システムの出力が使用され得る。具体的には、システムは、特徴ベクトルｘ４１２を含み得る実世界のデータを受け取ることができる。ブロック４１４において、システムは、モデル（たとえば、階層多クラス・モデル）を適用し、それによって分類ｙを出力として生成することができる。ブロック４１６において、システムは、生成された分類ｙに基づいて説明ｚを決定することができる。ブロック４１８において、システムは、ｚ、およびｚとｙの間の階層関係に関連する情報を使用して、分類ｙを生成することができる。
【００６８】
図５は、本開示の例示的な実施形態による、代替の説明を提供するための後処理動作の例示的な図を示す。簡潔にするために、本明細書に記載の１つまたは複数の実施形態で使用されている同様の要素についての繰り返しの説明は省略する。図５００は、ＡＩシステム５０２を含み得る。ＡＩシステム５０２は、図１、図３、および図４に関連して図示および説明したような様々なコンポーネントを含み得る。具体的には、ＡＩシステム５０２は、プロセッサ１０２、メモリ１０４、訓練コンポーネント１１０、推奨コンポーネント１１２、組合せコンポーネント１１４、または分解コンポーネント１１６あるいはその組合せを含んでよい。
【００６９】
さらに、ＡＩシステム５０２は、図３および図４に関連して図示および説明したような動作または手順あるいはその両方を実行するように構成されてよい。具体的には、ＡＩシステム５０２は、モデル（たとえば、本明細書で述べるような多クラス・モデルまたは階層多クラス・モデル）に基づいて、所与の特徴ベクトルｘに説明ｚを提供することができる。説明ｚは、ペア（ｘ，ｙ）に関連付けられ得るいくつかの説明のうちの１つとすることができ、たとえば、いくつかの説明は互いの変形であってよい。たとえば、説明は、異なる言語であるか、異なる用語および語彙を使用して記述されるか、または異なるユーザに対する異なるレベルの詳細が与えられ得る。したがって、ＡＩシステム５０２によって提供される説明を、後処理フィルタ５０４に提供することができる。５０４において、後処理フィルタは、たとえば、ユーザ・プロファイル（図示せず）に基づいて所与のユーザ特性を決定することができる。ユーザ・プロファイルは、ユーザによって提供され得るか、またはデータベース、たとえばネットワーク・データベースとの通信を介して提供されてよい。データベースは、クラウド・コンピューティング・プラットフォームに格納またはホストされたデータベースを含むことができる。いくつかの態様において、ユーザ特性には、姓または名、居住地の国、州、郵便番号または市、年齢、生物学的分類、ユーザが通う学校または職場の名前、学歴、給与、職位などが含まれ得るが、これらに限定されない。
【００７０】
具体的には、後処理フィルタ５０４は、情報のテーブル、たとえば、ルックアップ・テーブル５０５などのルックアップ・テーブルを含むデータベースにアクセスすることができる。いくつかの実施形態において、ルックアップ・テーブル５０５は、たとえば特徴ベクトルＸ１、Ｘ２、およびＸ３を含む、特徴ベクトル５０６の列を含むことができる。いくつかの実施形態において、ルックアップ・テーブル５０５は、たとえば分類Ｙ１、Ｙ２、およびＹ３を含む、分類５０８の列を含むことができる。いくつかの実施形態において、ルックアップ・テーブル５０５は、たとえば説明Ｅ１１、Ｅ１２、およびＥ１３を含む、第１の説明５１０の列を含むことができる。一実施形態において、第１の説明は、たとえば訓練または推奨プロセス中に、ＡＩシステムに最初に提供された説明を含むことができる。いくつかの実施形態において、ルックアップ・テーブル５０５は、第２の説明５１２（たとえば、説明Ｅ２１、Ｅ２２、およびＥ２３）の列、および第３の説明５１４（たとえば、説明Ｅ３１、Ｅ３２、およびＥ３３）の列をさらに含むことができる。一実施形態において、第２の説明５１２は、第１の説明５１０の第２の変形を含むことができ、第３の説明５１４は、第１の説明５１０または第２の説明５１２の第３の変形を含むことができる。たとえば、Ｅ２１は、第１の説明Ｅ１１の第２の変形を含むことができる。一例において、説明Ｅ２１および説明Ｅ１１は、同じまたは類似の内容を有することができるが、異なる言語であるか、異なる用語および語彙を使用して記述されるか、または異なるユーザに対する異なるレベルの詳細が与えられ得る。同様に、説明Ｅ３１および説明Ｅ１１、またはＥ３１およびＥ２１は、同じまたは類似の内容を有することができるが、異なる言語であるか、異なる用語および語彙を使用して記述されるか、または異なるユーザに対する異なるレベルの詳細が与えられ得る。いくつかの実施形態において、例示的なルックアップ・テーブル５０５に示したものよりも多くの説明の列があり得るが、簡潔にするために省略されている。
【００７１】
いくつかの実施形態において、ルックアップ・テーブル５０５の列、たとえば説明の列の内容は、たとえばハッシュ関数を使用して、短縮またはコード化された形式で提供され得る。さらに、ネットワークに関連付けられているかまたはローカルに設けられた記憶デバイスに格納する必要があるデータの量を削減するために、任意の数の内部マッピングまたはメモリ削減技法およびアルゴリズムを使用することができる。
【００７２】
図６は、本開示の例示的な実施形態による、ＡＩシステムおよびアルゴリズムの態様を動作させるための例示的なフローチャートの図を示す。簡潔にするために、本明細書に記載の１つまたは複数の実施形態で使用されている同様の要素についての繰り返しの説明は省略する。ブロック６０１において、第１の訓練データセットを受け取ることができ、第１のデータセットは、第１の特徴ベクトル、第１のクラス、および第１の説明を含むことができる。いくつかの態様において、第１の説明は、数字、テキスト文字列、画像ファイル、オーディオ・ファイル、ビデオ・ファイルなどのうちの１つまたは複数を含むことができる。さらに、第１の説明は、処理効率を向上させるためにクラウド・ソーシング・プロセスから少なくとも部分的に提供することができる。たとえば、ユーザが金銭的報奨と引き換えに説明を提供できるように、特徴ベクトルをソーシャル・メディア・プラットフォームに投稿することができる。別の例では、ユーザがたとえば通常の職務の一部として説明を提供できるように、パスワード保護されたネットワーク上のユーザに特徴ベクトルまたは分類あるいはその両方を表示することができる。特徴ベクトルの例には、画像、ビデオ、オーディオ、テキストなどが含まれ得るが、これらに限定されない。決定または分類あるいはその両方の例には、画像、ビデオ、またはオーディオについての説明、テキストの段落についての要約、融資申請に対する融資承認決定などが含まれ得るが、これらに限定されない。第１の説明は、特徴がなぜ特定のクラスを生成したかについての理由を提供することができる。いくつかの実施形態において、説明は、数字、テキスト文字列、画像、またはビデオ・ファイルなどの任意の適切な形式をとることができる。いくつかの実施形態において、各説明は、一意の識別子で表すことができる。
【００７３】
ブロック６０２において、第１のクラスと第１の説明を組み合わせて、第１の拡張ラベルならびに第１の特徴ベクトルおよび第１の拡張ラベルを含む第２の訓練データセットを生成することができる。いくつかの態様において、拡張ラベルは、第１の説明と第１のクラスの連結を含むことができ、または第１の説明と第１のクラスのより高度化された組合せ（たとえば、ハッシュ化された組合せ）としてもよい。
【００７４】
ブロック６０４において、第２の訓練データセットで訓練された分類器を使用して、第２の特徴ベクトルを分析し、第２の拡張ラベルを生成することができる。いくつかの態様において、分類器は、多クラス機械学習アルゴリズムを使用して訓練することができる。いくつかの実施形態において、多クラス機械学習アルゴリズムは、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、ランダム・フォレスト・アルゴリズムなどを含む。いくつかの態様において、開示されたＡＩシステムは、機械学習分類アルゴリズムから独立して動作することができる。別の態様において、本開示は、ニューラル・ネットワークを含む任意の教師あり学習分類アルゴリズムと連携することができ、開示された技術を広く展開可能にすることができる。
【００７５】
ブロック６０６において、分類器を使用して第２の拡張ラベルを分解して、第２のクラスおよび第２の説明を生成することができる。いくつかの例示的な実施形態において、分解は、拡張ラベルとその対応する分類および説明との連結を解除することによって実行され得る。１つまたは複数の実施形態において、分解は、説明と分類を組み合わせるかまたはマージするために使用された元の関数の逆関数を実行することによって実行され得る。いくつかの態様において、逆関数は、逆ハッシング法、または他の任意の適切な方法もしくは技法の形をとることができる。
【００７６】
ブロック６０８において、ユーザに推奨を行うことができる。いくつかの態様において、推奨は、たとえばスマートフォン、ラップトップ、コンピュータなどのユーザのデバイスを介してユーザに提示され得る。いくつかの態様において、ユーザは、たとえばデバイスを介してフィードバックを提供することができる。ユーザは、たとえば、推奨が正当化され、十分に説明されたかどうかを特定することができる。たとえば、ユーザは、説明およびそれが所与の状況（たとえば、特徴ベクトルまたは対応する分類／正当化理由あるいはその両方）にどの程度対応しているかをスコア付けすることができる。スコアは、たとえば、１から１０の段階でのスコアとすることができ、１は不十分な正当化理由または説明あるいはその両方を表し、１０は優れた説明を表す。このようなフィードバックを使用して、たとえば、ＡＩシステムのさらなる最適化のために追加または変更された訓練データセットを提供することによって、ＡＩシステムおよびアルゴリズムの訓練段階を改善することができる。
【００７７】
図７は、本開示の例示的な実施形態による、ＡＩシステムおよびアルゴリズムの態様を動作させるためのさらなる例示的なフローチャートの図を示す。簡潔にするために、本明細書に記載の１つまたは複数の実施形態で使用されている同様の要素についての繰り返しの説明は省略する。ブロック７００において、推奨に基づいて、後処理のために１つまたは複数のユーザ特性（年齢、言語など）が決定され得る。いくつかの態様において、推奨は、後処理のための説明と共に後処理フィルタに提供され得る。後処理フィルタは、たとえば、ユーザ・プロファイルに基づいて所与のユーザ特性を決定することができる。ユーザ・プロファイルは、ユーザによって提供され得るか、またはデータベース、たとえばネットワーク・データベースとの通信を介して提供されてよい。データベースは、クラウド・コンピューティング・プラットフォームに格納またはホストされたデータベースを含み得る。
【００７８】
ブロック７０２において、ユーザ特性および推奨に基づいて、変更された説明を含むデータベースの検索が実行され得る。いくつかの態様において、後処理フィルタは、情報のテーブル、たとえばルックアップ・テーブルを含むデータベースにアクセスすることができる。いくつかの実施形態において、ルックアップ・テーブルは、たとえば、特徴ベクトルＸ１、Ｘ２、およびＸ３を含む特徴ベクトルの列を含み得る。いくつかの実施形態において、ルックアップ・テーブルは、たとえば、分類Ｙ１、Ｙ２、およびＹ３を含む分類の列を含み得る。いくつかの実施形態において、ルックアップ・テーブルは、第１の説明の列を含み得る。一実施形態において、第１の説明は、たとえば訓練プロセスまたは推奨プロセス中にＡＩシステムに最初に提供された説明を含み得る。いくつかの実施形態において、ルックアップ・テーブルは、第２の説明および第３の説明の列をさらに含み得る。一実施形態において、第２の説明は、第１の説明の第２の変形を含むことができ、第３の説明は、第１の説明または第２の説明の第３の変形を含むことができる。一例では、様々な説明が、同じまたは類似の内容を有することができるが、異なる言語であるか、異なる用語および語彙を使用して記述されるか、または異なるユーザに対する異なるレベルの詳細が与えられ得る。
【００７９】
いくつかの実施形態において、ルックアップ・テーブルの列、たとえば説明の列の内容は、たとえばハッシュ関数を使用して、短縮またはコード化された形式で提供され得る。さらに、ネットワークに関連付けられているかまたはローカルに設けられた記憶デバイスに格納する必要があるデータの量を削減するために、任意の数の内部マッピングまたはメモリ削減技法およびアルゴリズムを使用することができる。
【００８０】
ブロック７０４において、ユーザ特性に基づいて、変更された説明を取得することができる。いくつかの態様において、変更された説明は、任意の適切なアルゴリズムを使用して、データベースまたはルックアップ・テーブル内で説明を検索することによって取得することができる。たとえば、あるデータ構造内に格納された情報を取得するために使用することができる任意の適切な検索アルゴリズムを使用することができる。このような構造の例には、リンク・リスト、配列データ構造、または検索ツリーが含まれるが、これらに限定されない。適切な検索アルゴリズムは、検索されるデータ構造に依存する場合があり、またデータ（たとえば、訓練データセット、ユーザ・プロファイルなど）に関する予備知識を含む場合もある。
【００８１】
ブロック７０６において、変更された説明がユーザに提示され得る。いくつかの態様において、変更された説明は、たとえばスマートフォン、ラップトップ、コンピュータなどのユーザのデバイスを介してユーザに提示され得る。いくつかの態様において、ユーザは、たとえばデバイスを介してフィードバックを提供することができる。ユーザは、たとえば、変更された説明がユーザにとってより理解しやすかったかどうかを特定することができる。たとえば、ユーザは、変更された説明およびそれがユーザにとってどの程度理解しやすかったかをスコア付けすることができる。スコアは、たとえば、１から１０の段階でのスコアとすることができ、１は理解しにくい説明を表し、１０は理解しやすい説明を表す。このようなフィードバックを使用して、たとえば、ルックアップ・テーブルまたはデータベースに追加または変更された代替の説明を提供することによって、ＡＩシステムおよびアルゴリズムを改善することができる。
【００８２】
いくつかの実施形態において、図１〜図７に関連して説明したＡＩシステムおよびアルゴリズムによって提供される説明を受け取り、それから利益を得る可能性がある少なくとも３つのエンティティが存在し得る。第１のエンティティには、推奨を使用する人々を含み得るエンド・ユーザ、たとえば医師、裁判官、融資担当者、ソーシャル・ワーカなどが含まれ得る。エンド・ユーザには、推奨によって影響を受ける可能性のある人、たとえば、患者、逮捕者、融資希望者、リスクのある人なども含まれ得る。いくつかの実施形態において、所望の説明は、このようなエンティティが公正に扱われたかどうか、および異なる結果を得るためにどの要素を変更できるかを理解するのに役立つ場合がある。
【００８３】
１つまたは複数の実施形態において、第２のエンティティには、政府機関が含まれることがあり、政府機関は、その市民の権利を保護する責任を負う可能性があり、したがって、差別のない方法で決定が行われることを保証することから利益を得る可能性がある。
【００８４】
一実施形態において、第３のエンティティは、ＡＩシステム・ビルダまたは利害関係者あるいはその両方を含み得る。このようなエンティティには、ＡＩシステムを所有、構築、または展開する技術担当者が含まれ得るので、ＡＩシステムが期待どおりに機能しているかどうか、ＡＩシステムをどのように診断および改善するかを知ること、場合によってはＡＩシステムの決定から洞察を得ることを必要とする場合がある。
【００８５】
いくつかの実施形態において、説明がエンティティのニーズを確実に満たすようにするために、説明に対する各エンティティのニーズの背景にある動機および期待を使用することができる。たとえば、第３のエンティティは、動作を実行するために、システムの内部構造のより詳細な説明が必要になる場合がある。対照的に、第２のエンティティは、訓練データセットを含むプロセスが公平であり、したがって差別しないというＡＩシステムによる提示から利益を得る可能性がある。
【００８６】
いくつかの実施形態において、公平性を確保することが説明を求める動機となり得るが、説明を提供することは必ずしもシステムが公平であることを保証するものではなく、説明を作成しない公正なシステムを有することができる。いくつかの実施形態において、決定の影響は大きく変動する可能性があり、したがって、決定の影響は、本明細書に記載の意思決定プロセスの要因となり得る。たとえば、特定のヘルスケア治療の選択、昇進の拒否、または判決の提案は、関与するエンティティに直接的および間接的に影響を及ぼす場合がある。対照的に、表示する広告のタイプ、どのニュース記事を推奨するか、または次にどの映画を視聴するかに関する決定は、関与するエンティティに重要な決定ではない場合がある。したがって、自動化された決定がもたらし得る影響には範囲がある場合があり、決定を特定するために本明細書に記載のアルゴリズムに含めることができる。いくつかの実施形態において、エンティティへの影響が大きいほど、第１および第２のエンティティにとって説明が必要になる可能性が高くなる。さらに、第３のエンティティは、ＡＩシステム、たとえば社会に価値をもたらすＡＩシステムまたはビジネス・ニーズを満たすＡＩシステムに強い関心を持つ場合がある。
【００８７】
述べたように、本開示に関連して使用される１つまたは複数のデータベースは、クラウド・コンピューティング・プラットフォーム上に格納またはホストされるデータベースを含み得る。本開示はクラウド・コンピューティングに関する詳細な説明を含むが、本明細書に記載された教示の実装はクラウド・コンピューティング環境に限定されないことを理解されたい。むしろ、本発明の実施形態は、現在知られている、または後に開発される他の任意のタイプのコンピューティング環境と組み合わせて実装することが可能である。
【００８８】
クラウド・コンピューティングは、最小限の管理労力、またはサービス・プロバイダとの最小限の対話で迅速にプロビジョニングおよび解放され得る構成可能なコンピューティング・リソース（たとえば、ネットワーク、ネットワーク帯域幅、サーバ、処理、メモリ、ストレージ、アプリケーション、仮想マシン、およびサービス）の共用プールへの簡便かつオンデマンドのネットワーク・アクセスを可能にするためのサービス提供のモデルである。このクラウド・モデルは、少なくとも５つの特徴、少なくとも３つのサービス・モデル、および少なくとも４つの展開モデルを含み得る。
【００８９】
特徴は、以下の通りである。
オンデマンド・セルフサービス：クラウド・コンシューマは、サービス・プロバイダとの間で人間の対話を必要とすることなく、必要に応じて自動的に、サーバ時間およびネットワーク・ストレージなどのコンピューティング機能を一方的にプロビジョニングすることができる。
広範なネットワーク・アクセス：機能は、ネットワーク上で利用可能であり、異種のシン・クライアント・プラットフォームまたはシック・クライアント・プラットフォーム（たとえば、携帯電話、ラップトップ、およびＰＤＡ）による使用を促進する標準的なメカニズムを介してアクセスされる。
リソースのプール化：プロバイダのコンピューティング・リソースは、マルチテナント・モデルを使用して複数のコンシューマにサービス提供するようにプール化され、異なる物理リソースおよび仮想リソースが、要求に応じて動的に割当ておよび再割当てされる。コンシューマは一般に、提供されるリソースの正確な位置に対して制御も知識も有していないが、より高い抽象化レベルでは位置（たとえば、国、州、またはデータセンタ）を特定し得るという点で、位置の独立性があるといえる。
迅速な柔軟性：機能を、迅速かつ柔軟に、場合によっては自動的にプロビジョニングして素早くスケール・アウトし、迅速に解放して素早くスケール・インすることができる。コンシューマにとっては、プロビジョニングに利用可能な機能は、しばしば無制限であるように見え、いつでも任意の数量で購入することができる。
サービスの測定：クラウド・システムは、サービスのタイプ（たとえば、ストレージ、処理、帯域幅、およびアクティブなユーザ・アカウント）に適した一定の抽象化レベルでの計量機能を活用することによって、リソースの使用を自動的に制御および最適化する。リソースの使用状況を監視、制御、および報告することができ、利用するサービスのプロバイダとコンシューマの両方に透明性を提供する。
【００９０】
サービス・モデルは、以下の通りである。
ソフトウェア・アズ・ア・サービス（ＳａａＳ）：クラウド・インフラストラクチャ上で動作しているプロバイダのアプリケーションを使用するために、コンシューマに提供される機能である。アプリケーションは、ウェブ・ブラウザ（たとえば、ウェブ・ベースの電子メール）などのシン・クライアント・インターフェースを介して様々なクライアント・デバイスからアクセス可能である。限定されたユーザ固有のアプリケーション構成設定を想定される例外として、コンシューマは、ネットワーク、サーバ、オペレーティング・システム、ストレージ、または個々のアプリケーション機能を含む基礎となるクラウド・インフラストラクチャを管理も制御もしない。
プラットフォーム・アズ・ア・サービス（ＰａａＳ）：プロバイダによってサポートされるプログラミング言語およびツールを使用して生成されたコンシューマが生成または取得したアプリケーションをクラウド・インフラストラクチャ上に展開するために、コンシューマに提供される機能である。コンシューマは、ネットワーク、サーバ、オペレーティング・システム、またはストレージなどの基礎となるクラウド・インフラストラクチャを管理も制御もしないが、展開されたアプリケーション、および場合によってはアプリケーションをホストする環境構成を制御する。
インフラストラクチャ・アズ・ア・サービス（ＩａａＳ）：オペレーティング・システムおよびアプリケーションを含み得る任意のソフトウェアをコンシューマが展開および動作させることができる、処理、ストレージ、ネットワーク、および他の基本的なコンピューティング・リソースをプロビジョニングするために、コンシューマに提供される機能である。コンシューマは、基礎となるクラウド・インフラストラクチャを管理も制御もしないが、オペレーティング・システム、ストレージ、展開されたアプリケーションを制御し、場合によっては選択されたネットワーキング・コンポーネント（たとえば、ホスト・ファイアウォール）を限定的に制御する。
【００９１】
展開モデルは、以下の通りである。
プライベート・クラウド：クラウド・インフラストラクチャは、ある組織のためだけに運用される。このクラウド・インフラストラクチャは、組織または第三者によって管理されてよく、オンプレミスまたはオフプレミスで存在してよい。
コミュニティ・クラウド：クラウド・インフラストラクチャは複数の組織で共有され、関心事項（たとえば、ミッション、セキュリティ要件、ポリシー、コンプライアンス上の考慮事項）を共有している特定のコミュニティをサポートする。このクラウド・インフラストラクチャは、組織または第三者によって管理されてよく、オンプレミスまたはオフプレミスで存在してよい。
パブリック・クラウド：クラウド・インフラストラクチャは、一般公衆または大規模な業界グループに利用可能であり、クラウド・サービスを販売する組織によって所有される。
ハイブリッド・クラウド：クラウド・インフラストラクチャは、固有のエンティティのままであるが、データおよびアプリケーションの移植性（たとえば、クラウド間の負荷分散のためのクラウド・バースティング）を可能にする標準化された技術または専用の技術によって結び付けられる２つ以上のクラウド（プライベート、コミュニティ、またはパブリック）の合成である。
【００９２】
クラウド・コンピューティング環境は、ステートレス性、低結合性、モジュール性、および意味的相互運用性に焦点を置くことを指向するサービスである。クラウド・コンピューティングの中心は、相互接続されたノードのネットワークを含むインフラストラクチャである。
【００９３】
次に図８を参照すると、例示的なクラウド・コンピューティング環境８００が示されている。簡潔にするために、本明細書に記載の他の実施形態で使用されている同様の要素についての繰り返しの説明は省略する。図示のように、クラウド・コンピューティング環境８００は、たとえば、携帯情報端末（ＰＤＡ：personal digital assistant）もしくは携帯電話８０４、デスクトップ・コンピュータ８０６、ラップトップ・コンピュータ８０８、または自動車コンピュータ・システム８１０あるいはその組合せなどのクラウド・コンシューマによって使用されるローカル・コンピューティング・デバイスが通信し得る、１つまたは複数のクラウド・コンピューティング・ノード８０２を含む。ノード８０２は、互いに通信してよい。ノード８０２は、本明細書で上述したようなプライベート・クラウド、コミュニティ・クラウド、パブリック・クラウド、またはハイブリッド・クラウド、あるいはその組合せなどの１つまたは複数のネットワーク内で物理的にまたは仮想的にグループ化されてよい（図示せず）。これにより、クラウド・コンピューティング環境８００は、クラウド・コンシューマがローカル・コンピューティング・デバイス上にリソースを保持する必要のないサービスとして、インフラストラクチャ、プラットフォーム、またはソフトウェア、あるいはその組合せを提供することが可能になる。図８に示すコンピューティング・デバイス８０４〜８１０のタイプは、例示のみを意図しており、コンピューティング・ノード８０２およびクラウド・コンピューティング環境８００は、（たとえば、ウェブ・ブラウザを使用して）任意のタイプのネットワークまたはネットワーク・アドレス指定可能な接続あるいはその両方を介して任意のタイプのコンピュータ化されたデバイスと通信できることを理解されたい。
【００９４】
次に図９を参照すると、クラウド・コンピューティング環境８００（図８）によって提供される機能抽象化層のセットが示されている。簡潔にするために、本明細書に記載の他の実施形態で使用されている同様の要素についての繰り返しの説明は省略する。図９に示すコンポーネント、層、および機能は、例示のみを意図しており、本発明の実施形態はそれらに限定されないことを予め理解されたい。図示のように、以下の層および対応する機能が提供される。
【００９５】
ハードウェアおよびソフトウェア層９０２は、ハードウェアおよびソフトウェア・コンポーネントを含む。ハードウェア・コンポーネントの例には、メインフレーム９０４、ＲＩＳＣ（縮小命令セット・コンピュータ）アーキテクチャ・ベースのサーバ９０６、サーバ９０８、ブレード・サーバ９１０、記憶デバイス９１２、ならびにネットワークおよびネットワーキング・コンポーネント９１４が含まれる。いくつかの実施形態において、ソフトウェア・コンポーネントは、ネットワーク・アプリケーション・サーバ・ソフトウェア９１６およびデータベース・ソフトウェア９１８を含む。
【００９６】
仮想化層９２０は、抽象化層を提供し、この層から仮想エンティティの以下の例、すなわち、仮想サーバ９２２、仮想ストレージ９２４、仮想プライベート・ネットワークを含む仮想ネットワーク９２６、仮想アプリケーションおよびオペレーティング・システム９２８、ならびに仮想クライアント９３０が提供され得る。
【００９７】
一例では、管理層９３２は、以下に記載の機能を提供することができる。リソース・プロビジョニング９３４は、クラウド・コンピューティング環境内でタスクを実行するために利用されるコンピューティング・リソースおよび他のリソースの動的な調達を提供する。計量および価格決定９３６は、クラウド・コンピューティング環境内でリソースが利用されるときのコスト追跡、およびこれらのリソースの消費に対する課金または請求を提供する。一例では、これらのリソースは、アプリケーション・ソフトウェア・ライセンスを含み得る。セキュリティは、データおよび他のリソースのための保護に加えて、クラウド・コンシューマおよびタスクのための識別情報の検証を提供する。ユーザ・ポータル９８３は、コンシューマおよびシステム管理者にクラウド・コンピューティング環境へのアクセスを提供する。サービス・レベル管理９４０は、要求されるサービス・レベルが満たされるように、クラウド・コンピューティング・リソースの割当ておよび管理を提供する。サービス・レベル・アグリーメント（ＳＬＡ）の計画および履行９４２は、ＳＬＡに従って将来において要求されることが予想されるクラウド・コンピューティング・リソースの事前配置および調達を提供する。
【００９８】
ワークロード層９４４は、クラウド・コンピューティング環境が利用され得る機能の例を提供する。この層から提供され得るワークロードおよび機能の例には、マッピングおよびナビゲーション９４６、ソフトウェア開発およびライフサイクル管理９４８、仮想教室教育配信９５０、データ分析処理９５２、トランザクション処理９５４、ならびにエンティティの取扱いサービスに対する感受性の評価９５６が含まれる。本発明の様々な実施形態は、図８および図９を参照して説明したクラウド・コンピューティング環境を利用して、１つまたは複数のエンティティに関連する信頼傾向値を決定するか、または信頼傾向値に基づいて１つまたは複数のエンティティの１つまたは複数の取扱いサービスに対する感受性を決定するか、あるいはその両方を行うことができる。
【００９９】
本発明は、任意の可能な技術的詳細の統合レベルでのシステム、方法、またはコンピュータ・プログラム製品あるいはその組合せとすることができる。コンピュータ・プログラム製品は、プロセッサに本発明の態様を実施させるためのコンピュータ可読プログラム命令を有するコンピュータ可読記憶媒体（または複数の媒体）を含み得る。コンピュータ可読記憶媒体は、命令実行デバイスが使用するための命令を保持し、記憶することができる有形デバイスとすることができる。コンピュータ可読記憶媒体は、たとえば、電子記憶デバイス、磁気記憶デバイス、光学記憶デバイス、電磁気記憶デバイス、半導体記憶デバイス、または上記の任意の適切な組合せとすることができるが、これらに限定されない。コンピュータ可読記憶媒体のより具体的な例の非網羅的なリストには以下のもの、すなわち、ポータブル・コンピュータ・ディスケット、ハード・ディスク、ランダム・アクセス・メモリ（ＲＡＭ）、読取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読取り専用メモリ（ＥＰＲＯＭまたはフラッシュ・メモリ）、スタティック・ランダム・アクセス・メモリ（ＳＲＡＭ）、ポータブル・コンパクト・ディスク読取り専用メモリ（ＣＤ−ＲＯＭ）、デジタル多用途ディスク（ＤＶＤ）、メモリ・スティック、フロッピ・ディスク、パンチカードまたは命令が記録された溝内の隆起構造などの機械的に符号化されたデバイス、および上記の任意の適切な組合せが含まれる。コンピュータ可読記憶媒体は、本明細書で使用される場合、電波もしくは他の自由に伝播する電磁波、導波路もしくは他の伝送媒体を介して伝播する電磁波（たとえば、光ファイバ・ケーブルを通る光パルス）、または電線を介して送信される電気信号などの、一過性の信号自体であると解釈されるべきではない。
【０１００】
本明細書に記載のコンピュータ可読プログラム命令は、コンピュータ可読記憶媒体からそれぞれのコンピューティング／処理デバイスに、または、ネットワーク、たとえばインターネット、ローカル・エリア・ネットワーク、ワイド・エリア・ネットワーク、またはワイヤレス・ネットワークあるいはその組合せを介して外部コンピュータまたは外部記憶デバイスにダウンロードされてよい。ネットワークは、銅伝送ケーブル、光伝送ファイバ、ワイヤレス伝送、ルータ、ファイアウォール、スイッチ、ゲートウェイ・コンピュータ、またはエッジ・サーバあるいはその組合せを含んでよい。各コンピューティング／処理デバイスにおけるネットワーク・アダプタ・カードまたはネットワーク・インターフェースは、ネットワークからコンピュータ可読プログラム命令を受信し、そのコンピュータ可読プログラム命令を、それぞれのコンピューティング／処理デバイス内のコンピュータ可読記憶媒体への記憶のために転送する。
【０１０１】
本発明の動作を実行するためのコンピュータ可読プログラム命令は、アセンブラ命令、インストラクション・セット・アーキテクチャ（ＩＳＡ）命令、機械命令、機械依存命令、マイクロコード、ファームウェア命令、状態設定データ、集積回路用の構成データ、または、Ｓｍａｌｌｔａｌｋ（Ｒ）、Ｃ＋＋などのオブジェクト指向プログラミング言語および「Ｃ」プログラミング言語もしくは同様のプログラム言語などの手続き型プログラミング言語を含む１つまたは複数のプログラミング言語の任意の組合せで書かれたソース・コードもしくはオブジェクト・コードとすることができる。コンピュータ可読プログラム命令は、スタンドアロン・ソフトウェア・パッケージとして全体がユーザのコンピュータ上で、一部がユーザのコンピュータ上で、一部がユーザのコンピュータ上かつ一部がリモート・コンピュータ上で、または全体がリモート・コンピュータ上もしくはサーバ上で実行される場合があり。後者のシナリオでは、リモート・コンピュータは、ローカル・エリア・ネットワーク（ＬＡＮ）もしくはワイド・エリア・ネットワーク（ＷＡＮ）を含む任意のタイプのネットワークを介してユーザのコンピュータに接続される場合があり、または接続は、（たとえば、インターネット・サービス・プロバイダを使用してインターネットを介して）外部コンピュータに対して行われる場合がある。いくつかの実施形態において、本発明の態様を実行するために、たとえばプログラマブル・ロジック回路、フィールド・プログラマブル・ゲート・アレイ（ＦＰＧＡ）、またはプログラマブル・ロジック・アレイ（ＰＬＡ）を含む電子回路が、コンピュータ可読プログラム命令の状態情報を利用して電子回路をパーソナライズすることによって、コンピュータ可読プログラム命令を実行してよい。
【０１０２】
本発明の態様は、本発明の実施形態による方法、装置（システム）、およびコンピュータ・プログラム製品のフローチャート図またはブロック図あるいはその両方を参照しながら本明細書で説明されている。フローチャート図またはブロック図あるいはその両方の各ブロック、およびフローチャート図またはブロック図あるいはその両方のブロックの組合せは、コンピュータ可読プログラム命令によって実施され得ることが理解されよう。
【０１０３】
これらのコンピュータ可読プログラム命令は、コンピュータまたは他のプログラマブル・データ処理装置のプロセッサを介して実行される命令が、フローチャートまたはブロック図あるいはその両方の１つまたは複数のブロックで指定された機能／動作を実施するための手段を作り出すように、汎用コンピュータ、専用コンピュータ、または他のプログラマブル・データ処理装置のプロセッサに提供されて、マシンを作り出すものであってよい。これらのコンピュータ可読プログラム命令は、命令が記憶されたコンピュータ可読記憶媒体が、フローチャートまたはブロック図あるいはその両方の１つまたは複数のブロックで指定された機能／動作の態様を実施する命令を含む製造品を含むように、コンピュータ可読記憶媒体に記憶され、コンピュータ、プログラマブル・データ処理装置、または他のデバイスあるいはその組合せに対して特定の方式で機能するように指示できるものであってもよい。
【０１０４】
コンピュータ可読プログラム命令は、コンピュータ、他のプログラマブル装置、または他のデバイスで実行される命令が、フローチャートまたはブロック図あるいはその両方の１つまたは複数のブロックで指定された機能／動作を実施するように、コンピュータ実施プロセスを作り出すべくコンピュータ、他のプログラマブル・データ処理装置、または他のデバイスにロードされて、コンピュータ、他のプログラマブル装置、または他のデバイス上で一連の動作ステップを実行させるものであってもよい。
【０１０５】
図中のフローチャートおよびブロック図は、本発明の様々な実施形態によるシステム、方法およびコンピュータ・プログラム製品の可能な実装形態のアーキテクチャ、機能、および動作を示す。これに関して、フローチャートまたはブロック図の各ブロックは、指定された論理機能を実装するための１つまたは複数の実行可能命令を含む、命令のモジュール、セグメント、または一部を表すことがある。いくつかの代替の実装形態において、ブロックに記載された機能は、図に記載された順序とは異なる順序で行われてよい。たとえば、連続して示された２つのブロックは、実際には、関与する機能に応じて、実質的に同時に実行されてもよく、またはそれらのブロックは場合によっては逆の順序で実行されてもよい。ブロック図またはフローチャート図あるいはその両方の各ブロック、およびブロック図またはフローチャート図あるいはその両方のブロックの組合せは、指定された機能または動作を実行するか、あるいは専用ハードウェアとコンピュータ命令との組合せを遂行する専用ハードウェア・ベースのシステムによって実装され得ることにも留意されたい。
【０１０６】
開示された主題の様々な態様についてのコンテキストを提供するために、図１０および以下の説明は、開示された主題の様々な態様を実施することができる好適な環境の概要説明を提供することを意図している。図１０は、本明細書に記載の１つまたは複数の実施形態を容易にすることができる例示的かつ非限定的な動作環境のブロック図を示す。簡潔にするために、本明細書に記載の他の実施形態で使用されている同様の要素についての繰り返しの説明は省略する。図１０を参照すると、本開示の様々な態様を実施するための好適な動作環境１０００は、コンピュータ１０１２を含み得る。コンピュータ１０１２もまた、処理ユニット１０１４、システム・メモリ１０１６、およびシステム・バス１０１８を含み得る。システム・バス１０１８は、システム・メモリ１０１６を含むがこれに限定されないシステム・コンポーネントを、処理ユニット１０１４に動作可能に結合することができる。処理ユニット１０１４は、様々な入手可能なプロセッサのうちの任意のものとすることができる。デュアル・マイクロプロセッサおよび他のマルチプロセッサ・アーキテクチャを処理ユニット１０１４として採用することもできる。システム・バス１０１８は、業界標準アーキテクチャ（ＩＳＡ）、マイクロチャネル・アーキテクチャ（ＭＳＡ）、拡張ＩＳＡ（ＥＩＳＡ）、インテリジェント・ドライブ・エレクトロニクス（ＩＤＥ）、ＶＥＳＡローカル・バス（ＶＬＢ）、周辺機器相互接続（ＰＣＩ）、カード・バス、ユニバーサル・シリアル・バス（ＵＳＢ）、アドバンスト・グラフィックス・ポート（ＡＧＰ）、ファイアーワイヤ、および小型コンピュータ・システム・インターフェース（ＳＣＳＩ）を含むがこれらに限定されない任意の種類の利用可能なバス・アーキテクチャを使用した、メモリ・バスもしくはメモリ・コントローラ、周辺バスもしくは外部バス、またはローカル・バスあるいはその組合せを含む任意のいくつかのタイプのバス構造とすることができる。システム・メモリ１０１６は、揮発性メモリ１０２０および不揮発性メモリ１０２２も含み得る。不揮発性メモリ１０２２には、起動時などにコンピュータ１０１２内の要素間で情報を転送するための基本ルーチンを含む基本入出力システム（ＢＩＯＳ）が記憶され得る。限定ではなく例として、不揮発性メモリ１０２２は、読取り専用メモリ（ＲＯＭ）、プログラマブルＲＯＭ（ＰＲＯＭ）、電気的プログラマブルＲＯＭ（ＥＰＲＯＭ）、電気的消去可能プログラマブルＲＯＭ（ＥＥＰＲＯＭ）、フラッシュ・メモリ、または不揮発性ランダム・アクセス・メモリ（ＲＡＭ）（たとえば、強誘電体ＲＡＭ（ＦｅＲＡＭ））を含み得る。揮発性メモリ１０２０もまた、外部キャッシュ・メモリとして機能するランダム・アクセス・メモリ（ＲＡＭ）を含み得る。限定ではなく例として、ＲＡＭは、スタティックＲＡＭ（ＳＲＡＭ）、ダイナミックＲＡＭ（ＤＲＡＭ）、シンクロナスＤＲＡＭ（ＳＤＲＡＭ）、ダブル・データ・レートＳＤＲＡＭ（ＤＤＲ  ＳＤＲＡＭ）、エンハンストＳＤＲＡＭ（ＥＳＤＲＡＭ）、シンクリンクＤＲＡＭ（ＳＬＤＲＡＭ）、ダイレクト・ラムバスＲＡＭ（ＤＲＲＡＭ）、ダイレクト・ラムバス・ダイナミックＲＡＭ（ＤＲＤＲ���Ｍ）、およびラムバス・ダイナミックＲＡＭなどの多くの形式で利用可能である。
【０１０７】
コンピュータ１０１２は、取り外し可能／取り外し不可能な揮発性／不揮発性コンピュータ記憶媒体も含み得る。図１０は、たとえば、ディスク・ストレージ１０２４を示す。ディスク・ストレージ１０２４には、磁気ディスク・ドライブ、フロッピ・ディスク・ドライブ、テープ・ドライブ、Ｊａｚドライブ、Ｚｉｐドライブ、ＬＳ−１００ドライブ、フラッシュ・メモリ・カード、またはメモリ・スティックなどのデバイスも含まれるが、これらに限定されない。ディスク・ストレージ１０２４には、単体での記憶媒体、またはコンパクト・ディスクＲＯＭデバイス（ＣＤ−ＲＯＭ）、ＣＤ記録可能ドライブ（ＣＤ−Ｒドライブ）、ＣＤ書換え可能ドライブ（ＣＤ−ＲＷドライブ）、もしくはデジタル多用途ディスクＲＯＭドライブ（ＤＶＤ−ＲＯＭ）などの光ディスク・ドライブを含むがこれらに限定されない他の記憶媒体と組み合わせた記憶媒体も含まれ得る。システム・バス１０１８へのディスク・ストレージ１０２４の接続を容易にするために、インターフェース１０２６などの取り外し可能または取り外し不可能なインターフェースが使用され得る。図１０はまた、ユーザと、好適な動作環境１０００に記載している基本的なコンピュータ・リソースとの間の仲介として機能し得るソフトウェアも示している。このようなソフトウェアには、たとえば、オペレーティング・システム１０２８が含まれ得る。オペレーティング・システム１０２８は、ディスク・ストレージ１０２４に記憶することができ、コンピュータ１０１２のリソースを制御し割り当てるように動作する。システムアプリケーション１０３０は、システム・メモリ１０１６内またはディスク・ストレージ１０２４上などに記憶されたプログラム・コンポーネント１０３２およびプログラム・データ１０３４を介してオペレーティング・システム１０２８によるリソースの管理を利用することができる。本開示は、様々なオペレーティング・システムまたはオペレーティング・システムの組合せを用いて実施され得ることを理解されたい。ユーザは、１つまたは複数の入力デバイス１０３６を介してコンピュータ１０１２にコマンドまたは情報を入力する。入力デバイス１０３６には、マウスなどのポインティング・デバイス、トラックボール、スタイラス、タッチ・パッド、キーボード、マイクロフォン、ジョイスティック、ゲーム・パッド、衛星放送受信アンテナ、スキャナ、ＴＶチューナ・カード、デジタル・カメラ、デジタル・ビデオ・カメラ、ウェブ・カメラなどが含まれ得るが、これらに限定されない。これらおよび他の入力デバイスは、１つまたは複数のインターフェース・ポート１０３８を介してシステム・バス１０１８を介して処理ユニット１０１４に接続することができる。１つまたは複数のインターフェース・ポート１０３８には、たとえば、シリアル・ポート、パラレル・ポート、ゲーム・ポート、およびユニバーサル・シリアル・バス（ＵＳＢ）が含まれ得る。１つまたは複数の出力デバイス１０４０は、入力デバイス１０３６と同じタイプのポートのうちのいくつかを使用することができる。したがって、たとえば、ＵＳＢポートを使用して、コンピュータ１０１２に入力を提供し、コンピュータ１０１２から出力デバイス１０４０に情報を出力することができる。出力アダプタ１０４２は、いくつかある出力デバイス１０４０の中に、特別なアダプタを必要とするモニタ、スピーカ、およびプリンタのような一部の出力デバイス１０４０が存在することを示すために設けられている。出力アダプタ１０４２には、限定ではなく例として、出力デバイス１０４０とシステム・バス１０１８との間の接続手段を提供するビデオ・カードおよびサウンド・カードが含まれ得る。１つまたは複数のリモート・コンピュータ１０４４など、他のデバイスまたはデバイスのシステムあるいはその両方が入力と出力の両方の機能を提供することに留意されたい。
【０１０８】
コンピュータ１０１２は、リモート・コンピュータ１０４４などの１つまたは複数のリモート・コンピュータへの論理接続を使用するネットワーク化された環境において動作することができる。リモート・コンピュータ１０４４は、コンピュータ、サーバ、ルータ、ネットワークＰＣ、ワークステーション、マイクロプロセッサ・ベースの機器、ピア・デバイスまたは他の共通ネットワーク・ノードなどとすることができ、典型的には、コンピュータ１０１２に関して説明した要素のうちの多くまたはすべても含み得る。簡潔にするために、メモリ・ストレージ・デバイス１０４６のみをリモート・コンピュータ１０４４と共に示している。リモート・コンピュータ１０４４はネットワーク・インターフェース１０４８を介してコンピュータ１０１２に論理的に接続され、さらに通信接続１０５０を介して物理的に接続される。さらに、動作は、複数の（ローカルまたはリモート）システムにわたって分散され得る。ネットワーク・インターフェース１０４８は、ローカル・エリア・ネットワーク（ＬＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、セルラー・ネットワークなどの有線または無線あるいはその両方の通信ネットワークを包含し得る。ＬＡＮ技術には、ファイバ分散データ・インターフェース（ＦＤＤＩ）、銅線分散データ・インターフェース（ＣＤＤＩ）、Ｅｔｈｅｒｎｅｔ（Ｒ）、トークン・リングなどが含まれる。ＷＡＮ技術には、ポイント・ツー・ポイント・リンク、統合サービス・デジタル・ネットワーク（ＩＳＤＮ）およびその変形などの回路交換ネットワーク、パケット交換ネットワーク、ならびにデジタル加入者線（ＤＳＬ）が含まれるが、これらに限定されない。１つまたは複数の通信接続１０５０は、ネットワーク・インターフェース１０４８をシステム・バス１０１８に接続するために使用されるハードウェア／ソフトウェアを指す。通信接続１０５０は、説明を明確にするためにコンピュータ１０１２の内部に示しているが、コンピュータ１０１２の外部にある場合もある。ネットワーク・インターフェース１０４８に接続するためのハードウェア／ソフトウェアには、例示のみを目的として、正規電話グレード・モデム、ケーブル・モデムおよびＤＳＬモデムを含むモデム、ＩＳＤＮアダプタ、ならびにＥｔｈｅｒｎｅｔ（Ｒ）カードなどの内部技術および外部技術も含まれ得る。
【０１０９】
本発明の実施形態は、任意の可能な技術的詳細の統合レベルでのシステム、方法、装置、またはコンピュータ・プログラム製品あるいはその組合せとすることができる。コンピュータ・プログラム製品は、プロセッサに本発明の態様を実施させるためのコンピュータ可読プログラム命令を有するコンピュータ可読記憶媒体（または複数の媒体）を含み得る。コンピュータ可読記憶媒体は、命令実行デバイスが使用するための命令を保持し、記憶することができる有形デバイスとすることができる。コンピュータ可読記憶媒体は、たとえば、電子記憶デバイス、磁気記憶デバイス、光学記憶デバイス、電磁気記憶デバイス、半導体記憶デバイス、または上記の任意の適切な組合せとすることができるが、これらに限定されない。コンピュータ可読記憶媒体のより具体的な例の非網羅的なリストには以下のもの、すなわち、ポータブル・コンピュータ・ディスケット、ハード・ディスク、ランダム・アクセス・メモリ（ＲＡＭ）、読取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読取り専用メモリ（ＥＰＲＯＭまたはフラッシュ・メモリ）、スタティック・ランダム・アクセス・メモリ（ＳＲＡＭ）、ポータブル・コンパクト・ディスク読取り専用メモリ（ＣＤ−ＲＯＭ）、デジタル多用途ディスク（ＤＶＤ）、メモリ・スティック、フロッピ・ディスク、パンチカードまたは命令が記録された溝内の隆起構造などの機械的に符号化されたデバイス、および上記の任意の適切な組合せも含まれ得る。コンピュータ可読記憶媒体は、本明細書で使用される場合、電波もしくは他の自由に伝播する電磁波、導波路もしくは他の伝送媒体を介して伝播する電磁波（たとえば、光ファイバ・ケーブルを通る光パルス）、または電線を介して送信される電気信号などの、一過性の信号自体であると解釈されるべきではない。
【０１１０】
本明細書に記載のコンピュータ可読プログラム命令は、コンピュータ可読記憶媒体からそれぞれのコンピューティング／処理デバイスに、または、ネットワーク、たとえばインターネット、ローカル・エリア・ネットワーク、ワイド・エリア・ネットワーク、またはワイヤレス・ネットワークあるいはその組合せを介して外部コンピュータまたは外部記憶デバイスにダウンロードされてよい。ネットワークは、銅伝送ケーブル、光伝送ファイバ、ワイヤレス伝送、ルータ、ファイアウォール、スイッチ、ゲートウェイ・コンピュータ、またはエッジ・サーバあるいはその組合せを含み得る。各コンピューティング／処理デバイスにおけるネットワーク・アダプタ・カードまたはネットワーク・インターフェースは、ネットワークからコンピュータ可読プログラム命令を受信し、そのコンピュータ可読プログラム命令を、それぞれのコンピューティング／処理デバイス内のコンピュータ可読記憶媒体への記憶のために転送する。本発明の様々な態様の動作を実行するためのコンピュータ可読プログラム命令は、アセンブラ命令、インストラクション・セット・アーキテクチャ（ＩＳＡ）命令、機械命令、機械依存命令、マイクロコード、ファームウェア命令、状態設定データ、集積回路用の構成データ、または、Ｓｍａｌｌｔａｌｋ（Ｒ）、Ｃ＋＋などのオブジェクト指向プログラミング言語および「Ｃ」プログラミング言語もしくは同様のプログラム言語などの手続き型プログラミング言語を含む１つまたは複数のプログラミング言語の任意の組合せで書かれたソース・コードもしくはオブジェクト・コードとすることができる。コンピュータ可読プログラム命令は、スタンドアロン・ソフトウェア・パッケージとして全体がユーザのコンピュータ上で、一部がユーザのコンピュータ上で、一部がユーザのコンピュータ上かつ一部がリモート・コンピュータ上で、または全体がリモート・コンピュータ上もしくはサーバ上で実行されてよい。後者のシナリオでは、リモート・コンピュータは、ローカル・エリア・ネットワーク（ＬＡＮ）もしくはワイド・エリア・ネットワーク（ＷＡＮ）を含む任意のタイプのネットワークを介してユーザのコンピュータに接続されてもよく、または接続は外部コンピュータ（たとえば、インターネット・サービス・プロバイダを使用してインターネットを介して）に対して行われてもよい。いくつかの実施形態において、本開示の態様を実行するために、たとえばプログラマブル・ロジック回路、フィールド・プログラマブル・ゲート・アレイ（ＦＰＧＡ）、またはプログラマブル・ロジック・アレイ（ＰＬＡ）を含む電子回路が、コンピュータ可読プログラム命令の状態情報を利用して電子回路をカスタマイズすることによって、コンピュータ可読プログラム命令を実行することができる。
【０１１１】
本発明の態様は、本発明の実施形態による方法、装置（システム）、およびコンピュータ・プログラム製品のフローチャート図またはブロック図あるいはその両方を参照しながら本明細書で説明されている。フローチャート図またはブロック図あるいはその両方の各ブロック、およびフローチャート図またはブロック図あるいはその両方のブロックの組合せは、コンピュータ可読プログラム命令によって実施され得ることが理解されよう。これらのコンピュータ可読プログラム命令は、コンピュータまたは他のプログラマブル・データ処理装置のプロセッサを介して実行される命令が、フローチャートまたはブロック図あるいはその両方の１つまたは複数のブロックで指定された機能／動作を実施する手段を作り出すように、汎用コンピュータ、専用コンピュータ、または他のプログラマブル・データ処理装置のプロセッサに提供されて、マシンを作り出すものとすることができる。これらのコンピュータ可読プログラム命令は、命令が記憶されたコンピュータ可読記憶媒体が、フローチャートまたはブロック図あるいはその両方の１つまたは複数のブロックで指定された機能／動作の態様を実施する命令を含む製造品を含むように、コンピュータ可読記憶媒体に記憶され、コンピュータ、プログラマブル・データ処理装置、または他のデバイスあるいはその組合せに対して特定の方式で機能するように指示できるものとすることもできる。コンピュータ可読プログラム命令は、コンピュータ、他のプログラマブル装置、または他のデバイスで実行される命令が、フローチャートまたはブロック図あるいはその両方の１つまたは複数のブロックで指定された機能／動作を実施するように、コンピュータ実施プロセスを作り出すべくコンピュータ、他のプログラマブル・データ処理装置、または他のデバイスにロードされて、コンピュータ、他のプログラマブル装置、または他のデバイス上で一連の動作行為を実行させるものとすることもできる。
【０１１２】
図中のフローチャートおよびブロック図は、本発明の様々な実施形態によるシステム、方法およびコンピュータ・プログラム製品の可能な実装形態のアーキテクチャ、機能、および動作を示す。これに関して、フローチャートまたはブロック図の各ブロックは、指定された論理機能を実装するための１つまたは複数の実行可能命令を含む、命令のモジュール、コンポーネント、セグメント、または一部を表すことがある。いくつかの代替の実装形態において、ブロックに記載された機能は、図に記載された順序とは異なる順序で行うことができる。たとえば、連続して示された２つのブロックは、実際には、関与する機能に応じて、実質的に同時に実行することができ、またはそれらのブロックは場合によっては逆の順序で実行することができる。ブロック図またはフローチャート図あるいはその両方の各ブロック、およびブロック図またはフローチャート図あるいはその両方のブロックの組合せは、指定された機能または動作を実行するか、あるいは専用ハードウェアとコンピュータ命令との組合せを遂行する専用ハードウェア・ベースのシステムによって実装され得ることにも留意されたい。
【０１１３】
本主題について、１つまたは複数のコンピュータ上で動作するコンピュータ・プログラム製品のコンピュータ実行可能命令の一般的なコンテキストで上述したが、当業者には、本開示がまた他のプログラム・モジュールまたはプログラム・コンポーネントと組み合わせて実施され得ることが理解されよう。一般に、プログラム・モジュールまたはプログラム・コンポーネントは、特定のタスクを実行する、または特定の抽象データ型を実装する、あるいはその両方を行うルーチン、プログラム、コンポーネント、データ構造などを含む。また、当業者には、本発明のコンピュータ実施方法が、シングル・プロセッサまたはマルチプロセッサ・コンピュータ・システム、ミニコンピューティング・デバイス、メインフレーム・コンピュータ、ならびにコンピュータ、ハンドヘルド・コンピューティング・デバイス（たとえば、ＰＤＡ、電話）、マイクロプロセッサ・ベースのまたはプログラム可能なコンシューマ向けまたは産業用の電子機器などを含む他のコンピュータ・システム構成で実施できることが理解されよう。例示した態様は、通信ネットワークを介してリンクされたリモート処理デバイスによってタスクが実行される分散コンピューティング環境で実施することもできる。しかしながら、本開示のすべてではないとしてもいくつかの態様は、スタンドアロン・コンピュータ上で実施することができる。分散コンピューティング環境では、プログラム・モジュールまたはプログラム・コンポーネントは、ローカルおよびリモート両方のメモリ・ストレージ・デバイスに配置することができる。
【０１１４】
本出願で使用される場合、「コンポーネント」、「システム」、「プラットフォーム」、「インターフェース」などの用語は、１つまたは複数の特定の機能性を有するコンピュータ関連のエンティティ、または演算マシンに関連するエンティティを指すか、またはそれらを含むか、あるいはその両方である場合がある。本明細書で開示されるエンティティは、ハードウェア、ハードウェアとソフトウェアの組合せ、ソフトウェア、または実行中のソフトウェアのいずれかとすることができる。たとえば、コンポーネントは、プロセッサ上で動作するプロセス、プロセッサ、オブジェクト、実行ファイル、実行スレッド、プログラム、またはコンピュータあるいはその組合せとすることができるが、これらに限定されない。例として、サーバ上で動作するアプリケーションとそのサーバの両方を、コンポーネントとすることができる。１つまたは複数のコンポーネントがプロセスまたは実行スレッドあるいはその両方内に存在することができ、コンポーネントは、１つのコンピュータ上に局在しているか、または２つ以上のコンピュータ間に分散しているか、あるいはその両方である場合がある。別の例では、それぞれのコンポーネントは、様々なデータ構造が記憶された様々なコンピュータ可読媒体から実行することができる。コンポーネントは、１つまたは複数のデータ・パケット（たとえば、ローカル・システムまたは分散システム内の別のコンポーネントと、またはインターネットなどのネットワークを経由して他のシステムと、あるいはその両方と信号を介して対話する１つのコンポーネントからのデータ）を有する信号などに従って、ローカルまたはリモートあるいはその両方のプロセスを介して通信することができる。別の例として、コンポーネントは、プロセッサによって実行されるソフトウェアまたはファームウェア・アプリケーションによって動作する、電気回路または電子回路によって動作する機械部品によって提供される特定の機能を有する装置とすることができる。そのような場合、プロセッサは装置の内部にあっても外部にあってもよく、ソフトウェアまたはファームウェア・アプリケーションの少なくとも一部を実行することができる。さらに別の例として、コンポーネントは、機械部品なしで電子コンポーネントを介して特定の機能を提供する装置とすることができ、ここで電子コンポーネントは、電子コンポーネントの機能を少なくとも部分的に与えるソフトウェアまたはファームウェアを実行するプロセッサまたは他の手段を含み得る。一態様では、１つのコンポーネントが、たとえばクラウド・コンピューティング・システム内の仮想マシンを介して電子コンポーネントをエミュレートすることができる。
【０１１５】
加えて、「または」という用語は、排他的な「または」ではなく、包含的な「または」を意味するように意図されている。すなわち、特に指定のない限り、または文脈から明らかでない限り、「ＸはＡまたはＢを使用する」は、自然な包括的置換のうちのいずれかを意味するように意図されている。すなわち、ＸがＡを使用するか、ＸがＢを使用するか、またはＸがＡとＢの両方を使用する場合、これらの例はいずれも「ＸはＡまたはＢを使用する」を満たしていることになる。さらに、本明細書および添付の図面で使用する冠詞「１つの（ａ）」および「１つの（ａｎ）」は、特に指定のない限り、または文脈から単数形を対象とすることが明らかでない限り、一般に、「１つまたは複数」を意味すると解釈されるべきである。本明細書で使用される場合、「例」という用語または「例示的」という用語あるいはその両方は、例、事例、または例示としての役割を果たすものとして利用される。誤解を避けるために、本明細書に開示されている主題は、そのような例に限定されない。加えて、「例」という用語または「例示的」という用語あるいはその両方として本明細書に記載した任意の態様または設計は、必ずしも他の態様または設計よりも好ましいまたは有利であると解釈されるべきではなく、当業者に知られている同等の例示的な構造および技法を排除することを意味するものでもない。
【０１１６】
本明細書で用いられるときに、「プロセッサ」という用語は、シングルコア・プロセッサ、ソフトウェア・マルチスレッド実行能力を有するシングル・プロセッサ、マルチコア・プロセッサ、ソフトウェア・マルチスレッド実行能力を有するマルチコア・プロセッサ、ハードウェア・マルチスレッド技術を有するマルチコア・プロセッサ、並列プラットフォーム、および分散型共有メモリを有する並列プラットフォームを含むがこれらに限定されない、実質的に任意のコンピューティング処理ユニットまたはデバイスを指すことがある。さらに、プロセッサは、集積回路、特定用途向け集積回路（ＡＳＩＣ）、デジタル・シグナル・プロセッサ（ＤＳＰ）、フィールド・プログラマブル、ゲート・アレイ（ＦＰＧＡ）、プログラマブル・ロジック・コントローラ（ＰＬＣ）、コンプレックス・プログラマブル・ロジック・デバイス（ＣＰＬＤ）、ディスクリート・ゲートもしくはトランジスタ・ロジック、ディスクリート・ハードウェア・コンポーネント、または本明細書に記載の機能を実行するように設計されたそれらの任意の組合せを指すことがある。また、プロセッサは、ユーザ機器の空間使用を最適化するまたは性能を高めるために、これらには限定されないが、分子および量子ドット・ベースのトランジスタ、スイッチ、およびゲートなどのナノスケール・アーキテクチャを利用することができる。プロセッサは、コンピューティング処理ユニットの組合せとして実装することもできる。本開示では、「ストア」、「ストレージ」、「データ・ストア」、「データ・ストレージ」、「データベース」、およびコンポーネントの動作および機能に関連する実質的に他の任意の情報ストレージ・コンポーネントなどの用語は、「メモリ・コンポーネント」、「メモリ」において具体化されたエンティティ、またはメモリを含むコンポーネントを指すために用いられる。本明細書に記載のメモリまたはメモリ・コンポーネントあるいはその両方が、揮発性メモリもしくは不揮発性メモリのいずれかであり得るか、または揮発性メモリと不揮発性メモリの両方を含み得ることを理解されたい。限定ではなく例として、不揮発性メモリは、読取り専用メモリ（ＲＯＭ）、プログラマブルＲＯＭ（ＰＲＯＭ）、電気的プログラマブルＲＯＭ（ＥＰＲＯＭ）、電気的消去可能プログラマブルＲＯＭ（ＥＥＰＲＯＭ）、フラッシュ・メモリ、または不揮発性ランダム・アクセス・メモリ（ＲＡＭ）（たとえば、強誘電体ＲＡＭ（ＦｅＲＡＭ））を含み得る。揮発性メモリは、たとえば、外部キャッシュ・メモリとして機能し得るＲＡＭを含み得る。限定ではなく例として、ＲＡＭは、シンクロナスＲＡＭ（ＳＲＡＭ）、ダイナミックＲＡＭ（ＤＲＡＭ）、シンクロナスＤＲＡＭ（ＳＤＲＡＭ）、ダブル・データ・レートＳＤＲＡＭ（ＤＤＲ  ＳＤＲＡＭ）、エンハンストＳＤＲＡＭ（ＥＳＤＲＡＭ）、シンクリンクＤＲＡＭ（ＳＬＤＲＡＭ）、ダイレクト・ラムバスＲＡＭ（ＤＲＲＡＭ）、ダイレクト・ラムバス・ダイナミックＲＡＭ（ＤＲＤＲＡＭ）、およびラムバス・ダイナミックＲＡＭ（ＲＤＲＡＭ）などの多くの形式で利用可能である。さらに、本明細書で開示されているシステムまたはコンピュータ実施方法のメモリ・コンポーネ���トは、これらを含むことに限定されないが、これらおよび他の任意の適切なタイプのメモリを含むように意図されている。
【０１１７】
上記で説明したものは、システム、コンピュータ・プログラム製品、およびコンピュータ実施方法の例を含むにすぎない。当然ながら、本開示を説明するために、コンポーネント、製品、またはコンピュータ実施方法あるいはその組合せの考えられるすべての組合せを説明することは不可能であるが、当業者であれば、本開示の多くのさらなる組合せおよび置換えが可能であると理解することができる。さらに、「含む」、「有する」、「所有する」などの用語は、詳細な説明、特許請求の範囲、添付書類および図面で使用される限り、請求項において「備える」という用語が移行語として用いられるときに解釈されるように、その「備える」という用語と同様に包括的であるように意図されている。様々な実施形態の説明を例示の目的で提示してきたが、網羅的であること、または開示された実施形態に限定されるようには意図されていない。説明した実施形態の範囲から逸脱することなく、多くの変更形態および変形形態が当業者には明らかであろう。本明細書で使用される用語は、実施形態の原理、実際の適用例、または市場で見られる技術を超える技術的改良を最もよく説明するために、あるいは、本明細書で開示される実施形態を当業者が理解できるようにするために選択されたものである。
【図１】
2021531527.tif 000003
【図２】
2021531527.tif 000004
【図３】
2021531527.tif 000005
【図４】
2021531527.tif 000006
【図５】
2021531527.tif 000007
【図６】
2021531527.tif 000008
【図７】
2021531527.tif 000009
【図８】
2021531527.tif 000010
【図９】
2021531527.tif 000011
【図１０】
2021531527.tif 000012
【手続補正書】
【提出日】令和3年5月10日(2021.5.10)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
システムであって、
コンピュータ実行可能コンポーネントを格納するメモリと、
前記メモリに動作可能に結合され、前記メモリに格納された前記コンピュータ実行可能コンポーネントを実行するプロセッサとを含み、前記コンピュータ実行可能コンポーネントが、
第１の特徴ベクトル、第１のクラス、および第１の説明を含む第１の訓練データセットを受け取る訓練コンポーネントと、前記第１のクラスと前記第１の説明を組み合わせて、第１の拡張ラベルと前記第１の特徴ベクトルおよび前記第１の拡張ラベルを含む第２の訓練データセットとを作成する組合せコンポーネントと、
前記第２の訓練データセットで訓練され、第２の特徴ベクトルを分析して第２の拡張ラベルを生成する分類器と、
前記分類器を使用して、前記第２の拡張ラベルを分解して第２のクラスおよび第２の説明を生成する分解コンポーネントと
を含む、システム。
【請求項２】
前記第１の説明が、数字、テキスト文字列、画像ファイル、オーディオ・ファイル、またはビデオ・ファイルのうちの１つまたは複数を含む、請求項１に記載のシステム。
【請求項３】
処理効率を向上させるために、前記第１の説明がクラウド・ソーシング・プロセスから少なくとも部分的に提供される、請求項１または２に記載のシステム。
【請求項４】
前記分類器が多クラス機械学習アルゴリズムを使用して訓練される、請求項１から３のいずれか一項に記載のシステム。
【請求項５】
前記多クラス機械学習アルゴリズムが、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、またはランダム・フォレスト・アルゴリズムを含む、請求項４に記載のシステム。
【請求項６】
前記第２の説明の複雑性メトリックが、ユーザに関連する複雑性能力メトリック以下である、請求項１から５のいずれか一項に記載のシステム。
【請求項７】
前記第２の説明が、前記第１の訓練データセットに関連する分野と関係がある１つまたは複数の専門用語を使用する、請求項１から６のいずれか一項に記載のシステム。
【請求項８】
プロセッサが、
前記プロセッサに動作可能に結合された訓練コンポーネントによって、第１の特徴ベクトル、第１のクラス、および第１の説明を含む第１の訓練データセットを受け取り、前記プロセッサに動作可能に結合された組合せコンポーネントによって、前記第１のクラスと前記第１の説明を組み合わせて、第１の拡張ラベルと前記第１の特徴ベクトルおよび前記第１の拡張ラベルを含む第２の訓練データセットとを作成することと、
前記プロセッサに動作可能に結合された推奨コンポーネントによって、前記第２の訓練データセットで訓練された分類器を使用して、第２の特徴ベクトルを分析し、第２の拡張ラベルを生成することと、
前記プロセッサに動作可能に結合された分解コンポーネントによって、前記分類器を使用して、前記第２の拡張ラベルを分解して第２のクラスおよび第２の説明を生成することと
を実行する、方法。
【請求項９】
前記第１の説明が、数字、テキスト文字列、画像ファイル、オーディオ・ファイル、またはビデオ・ファイルのうちの１つまたは複数を含む、請求項８に記載の方法。
【請求項１０】
処理効率を向上させるために、前記第１の説明がクラウド・ソーシング・プロセスから少なくとも部分的に提供される、請求項８または９に記載の方法。
【請求項１１】
前記分類器が多クラス機械学習モデルに基づく、請求項８から１０のいずれか一項に記載の方法。
【請求項１２】
前記多クラス機械学習アルゴリズムが、サポート・ベクトル・マシン学習アルゴリズム、最近傍機械学習アルゴリズム、深層学習アルゴリズム、エクストリーム分類アルゴリズム、再帰学習アルゴリズム、階層学習アルゴリズム、またはランダム・フォレスト・アルゴリズムを含む、請求項１１に記載の方法。
【請求項１３】
前記第２の説明の複雑性メトリックが、ユーザに関連する複雑性能力メトリック以下である、請求項８から１２のいずれか一項に記載の方法。
【請求項１４】
前記第２の説明が、前記第１の訓練データセットに関連する分野と関係がある１つまたは複数の専門用語を使用する、請求項８から１３のいずれか一項に記載の方法。
【請求項１５】
請求項８から１４のいずれか一項に記載の方法をプロセッサに実行させる、コンピュータ・プログラム。
【請求項１６】
請求項８から１４のいずれか一項に記載の方法をプロセッサに実行させるコンピュータ・プログラムを記録した、コンピュータ可読記憶媒体。
【請求項１７】
特徴ベクトルを入力として、当該特徴ベクトルに対応する分類および説明を組み合わせた拡張ラベルを出力するよう、コンピュータを機能させるための訓練された分類器であって、
前記分類器は、前記特徴ベクトルと前記拡張ラベルとを含む訓練データセットで訓練され、
出力された前記拡張ラベルは、前記分類と前記説明とに分解が可能である、分類器。
【国際調査報告】
2021531527.tif 000013
2021531527.tif 000014