(57)【特許請求の範囲】
【請求項１】
第一の計算機と第二の計算機とでプログラム実行に伴って発生するイベントを時系列データとして記録したイベントトレース・データに含まれるイベントの発生時刻を補正するイベントトレース・データの時刻補正方法であって、
前記第一の計算機と前記第二の計算機とに接続されているクロック・スキュー分析手段が前記第一の計算機で送信プログラム、第二の計算機で受信プログラムを動作させてイベントトレース・データを採取するステップと、
前記クロック・スキュー分析手段が前記第一の計算機から採取したイベントトレース・データに含まれる複数の送信イベントと、前記第二の計算機から採取したイベントトレース・データに含まれる複数の受信イベントの対応を取り、前記受信イベントの発生時刻と対応する前記送信イベントの発生時刻の差から通信時間を求め、時刻に対する通信時間の変化を一次式で近似することにより前記第一の計算機に内蔵されている時計を基準としたときの前記第二の計算機に内蔵されている時計の進み方の違いであるクロック・スキュー値を求めるステップと、
前記第一の計算機と前記第二の計算機とに接続されている時刻補正手段が前記第一の計算機または前記第二の計算機で任意のプログラムを動作させて採取したイベントトレース・データに含まれるイベントの発生時刻を、前記クロック・スキュー値を利用して補正するステップ、
を有することを特徴とするイベントトレース・データの時刻補正方法。
【請求項２】
イベントトレース・データの分析から求めた時刻に対する通信時間の変化を一次式で近似し、その一次式から求めた通信時間とトレース・データの分析から求めた通信時間の差によって、クロック・スキュー値の有効性を判断する、請求項１に記載のイベントトレース・データの時刻補正方法。
【請求項３】
クロック・スキュー値が有効でないと判断された場合、時刻に対する通信時間の変化を近似した一次式から求めた通信時間と、トレース・データの分析から求めた通信時間の差が大きい通信操作の分析対象外としてクロック・スキュー値を再度分析する、請求項２に記載のイベントトレース・データの時刻補正方法。
【請求項４】
第一の計算機と第二の計算機とに接続され、前記第一の計算機と前記第二の計算機とでプログラム実行に伴って発生するイベントを時系列データとして記録したイベントトレース・データに含まれるイベントの発生時刻を補正するイベントトレース・データの時刻補正装置であって、
前記第一の計算機で送信プログラム、第二の計算機で受信プログラムを動作させてイベントトレース・データを採取し、前記第一の計算機から採取したイベントトレース・データに含まれる複数の送信イベントと、前記第二の計算機から採取したイベントトレース・データに含まれる複数の受信イベントの対応を取り、前記受信イベントの発生時刻と対応する前記送信イベントの発生時刻の差から通信時間を求め、時刻に対する通信時間の変化を一次式で近似することにより前記第一の計算機に内蔵されている時計を基準としたときの前記第二の計算機に内蔵されている時計の進み方の違いであるクロック・スキュー値を求めるクロック・スキュー分析手段と、
前記第一の計算機または前記第二の計算機で任意のプログラムを動作させて採取したイベントトレース・データに含まれるイベントの発生時刻を、前記クロック・スキュー値を利用して補正する時刻補正手段、
を有することを特徴とするイベントトレース・データの時刻補正装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ほぼ同じ時間帯に複数の測定対象マシンで採取したトレース・データを入力として、そのデータに記録されているマシン間で行なわれた通信操作に関するイベント情報を利用して性能分析を実施する性能分析に関する。
【背景技術】
【０００２】
従来のイベント・トレースを採取するシステムの一例が、特許文献１に記載されている。図２に示すように、このイベント・トレースを採取するシステムは、トレース・データ記録手段213と、トレース・データ記録媒体202と、オペレーティング・システム210に含まれるプローブとから構成されている。
【０００３】
このような構成を有する従来のイベント・トレースを採取するシステムでは、イベントが発生した時刻（タイム・スタンプ）を測定対象システムのハードウエアが備える時計201を用いて得ていた。マシンの時計は、マシンによって進み方が若干異なっているため、複数の測定対象マシンからイベント・トレースを採取する場合、それらのタイム・スタンプの進み方（タイム・スタンプ値の１に対応する時間）が僅か（10の-5〜-6乗のオーダー）にずれていることになる。
【０００４】
このような複数のトレース・データを入力として性能分析を行なう場合、トレース・データ採取を開始した時刻のずれを補正する技術が特許文献2に記載されている。この技術では、測定対象マシン間で行なわれる通信操作を利用してトレース採取開始時刻のずれを補正するため、通信操作の送信イベンと別のマシンでの受信イベントを正確に対応付ける必要がある。しかし、トレース採取期間が長時間になると、図11および図12に示したように、トレース・データ採取期間の最初（前半）では送信イベントと受信イベントの対応が取れるが、トレース・データ採取期間の最後（後半）では送信イベントと受信イベントの対応が取れなくなり（タイム・スタンプ上、受信イベントの方が送信イベントより先に発生する）、トレース採取開始時刻のずれが補正できない、という問題があった。
【０００５】
また、通信時間を分析する場合でも、トレース・データ採取期間の最初（前半）では通信時間がほぼ正確に求められるが、時間の経過につれて通信時間が不正確になっていく、という問題点もあった。
【０００６】
【特許文献１】特開2003-157185
【特許文献２】特開2005-235054
【発明の開示】
【発明が解決しようとする課題】
【０００７】
複数マシンについて同時にイベント・トレースを採取し、マシン間で行なわれる通信の対応関係を考慮した解析を行なう場合、各マシン間で時計の進み方が微妙に異なるため、トレース・データに含まれるタイム・スタンプからマシン間通信を抽出しようとすると、トレース採取期間の前半と後半で送信時刻と受信時刻の関係が狂うため、マシン間通信を正確に抽出できない、という問題点があった。
【０００８】
上記の問題を図11で説明する。この図は、２台のマシン間で行なわれる通信をタイム・チャートとして示したものであり、斜めの矢印がマシン間の通信を示している。矢印の根元が送信操作に対応しており、矢印の先が受信操作に対応している。ここで、マシン２の時計はマシン１の時計に対して0.0001倍進んでおり、簡単のため時刻0では両マシンの時計は一致している状況を考える。以降、マシン１の時計が示す値を絶対時刻と呼ぶことにする。すなわち、マシン２の時計は、絶対時刻の1.0001倍となるわけである。図に示した通り、絶対時刻が1と101のときにマシン１からマシン２に送信が行なわれ、絶対時刻が2と102のときにマシン２からマシン１への送信が行なわるものとし、その通信時間は絶対時刻で0.001かかる、という状況を考える。
【０００９】
マシン１が絶対時刻1で送信操作を行なった通信は、絶対時刻1.001でマシン２が受信操作を行なう。この受信操作の時刻をマシン２の時計で調べると、1.001の1.0001倍である1.0011001となる。逆に、マシン２が絶対時刻２（マシン２の時計では2.0002）で送信操作を行なった通信は、絶対時刻2.001でマシン1が受信操作を行なう。同様に、マシン１が絶対時刻101で送信操作を行なった通信は、絶対時刻101.001（マシン２の時計は101.0111001を示す）でマシン２が受信操作、マシン２が時刻102（マシン２の時計は102.0102を示す）で送信操作を行なった通信は、時刻102.001でマシン1が受信操作を行なう。
【００１０】
ここで、この動作状況について送信操作と受信操作をトレース対象に含むイベント・トレースをマシン１とマシン２で採取することを考える。図2に、トレース・データを採取するマシン１台の構成を示す。図2に示すとおり、トレース・データはトレース・データ記録手段213によってトレース・データ記録媒体202（マシンのメモリ中に割り当てた領域など）に記録される。このトレース・データ記録手段213は、オペレーティング・システム210内に組み込まれたプローブが実行される度に呼び出され、プローブに対応したイベント・データをトレース・データ記録媒体202に記録する。このマシンが備えるプローブには、オペレーティング・システムが備えるデータ受信手段211とデータ送信手段212内にも設置されるものを含む。夫々、データ受信操作やデータ送信操作が実行されたときにトレース・データ記録手段213を呼び出して、受信操作や送信操作が行なわれたことをイベント・データとしてトレース・データ記録媒体202に記録する。このイベント・データには、イベントの種類を示す情報とイベントの発生時刻を示すタイム・スタンプ情報が含まれるものとし、タイム・スタンプは、各マシンの時計201より得るものとする。タイム・スタンプとして絶対時刻を使用しないのは、困難、もしくは、絶対時刻を取得するために発生するオーバーヘッドのため、イベント・トレースとしての実用性がなくなってしまうためである。
【００１１】
２台のマシンから採取されたイベント・トレースより、各通信についての送信操作、受信操作の時刻を抽出し、トレース・データに記録されているタイム・スタンプを元に通信時間（＝受信時刻-送信時刻）を計算すると、図12に示す結果となる。ここで、絶対時刻102から102.001にかけて行なわれた通信操作についての通信時間を計算すると負の値となる。すなわち、見かけ上、送信操作の前に受信操作が行なわれるという矛盾した現象となってしまう。また、他の３つの通信についても、見かけ上、通信時間が時刻の経過と共に変化する結果となっている。このため、このようなトレース・データを入力としてマシン間通信について分析しようとしても、正確な結果が得られないという問題となっていた。
【課題を解決するための手段】
【００１２】
本発明のイベントトレース・データの時刻補正方法は、複数の計算機でプログラム実行に伴って発生するイベントを時系列データとして記録したイベントトレース・データに含まれるイベントの発生時刻を補正するイベントトレース・データの時刻補正方法であって、複数の測定対象計算機に内蔵されている時計の進み方の違いであるクロック・スキュー値を求めるステップと、前記の測定対象計算機で任意のプログラムを動作させて採取したイベントトレース・データに含まれるイベントの発生時刻を、前記のステップで求めたクロック・スキュー値を利用して補正するステップ、を有することを特徴とする。
また、本発明のイベントトレース・データの時刻補正方法は、さらに、複数の測定対象計算機に内蔵されている時計の進み方の違いであるクロック・スキュー値を求めるステップは、ある計算機で送信プログラム、別の計算機で受信プログラムを動作させてイベントトレース・データを採取するステップと、採取したイベントトレース・データの分析により、計算機に内蔵されている時計の進み方の違いであるクロック・スキュー値を求めるステップ、すなわち、まず、送信プログラムを動作させた計算機から採取したイベントトレース・データに含まれる複数の送信イベントと、受信プログラムを動作させた計算機から採取したイベントトレース・データに含まれる複数の受信イベントの対応を取り、次に、受信イベントの発生時刻と対応する送信イベントの発生時刻の差から通信時間を求め、最後に、時刻に対する通信時間の変化を一次式で近似することによりクロック・スキュー値を求めるステップから構成されることを特徴とする。
また、本発明のイベントトレース・データの時刻補正方法は、さらに、イベントトレース・データの分析から求めた時刻に対する通信時間の変化を一次式で近似し、その一次式から求めた通信時間とトレース・データの分析から求めた通信時間の差によって、クロック・スキュー値の有効性を判断することを特徴とする。
また、本発明のイベントトレース・データの時刻補正方法は、さらに、クロック・スキュー値が有効でないと判断された場合、時刻に対する通信時間の変化を近似した一次式から求めた通信時間と、トレース・データの分析から求めた通信時間の差が大きい通信操作の分析対象外としてクロック・スキュー値を再度分析することを特徴とする。
【発明の効果】
【００１３】
第１の効果は、複数の測定対象マシンで採取された複数のトレース・データを入力として各種の性能分析を行なう場合、トレース・データ中のタイム・スタンプの進みを揃えることができるため、各種の性能分析を行なうプログラムの構造を単純化できることにある。
【００１４】
その理由は、送信プログラムと受信プログラムを複数の測定対象マシン上で動作させて採取したイベント・トレースの分析により求めたクロック・スキュー値を利用し、任意の測定プログラムを前記測定対象マシン上で動作させて採取したイベント・トレース中のタイム・スタンプを時刻補正手段により補正するためである。
【発明を実施するための最良の形態】
【００１５】
(第一の実施例)
次に、本発明の第一の実施例の構成について図面を参照して詳細に説明する。
【００１６】
図１を参照すると、本発明の第一の実施例は、プログラム制御により動作するマシン１ 110、マシン２ 120と、クロック・スキュー分析のため各マシン上で動作する送信プログラム111、受信プログラム112と、クロック・スキュー分析手段100と、クロック・スキュー適用のため各マシン上で動作する測定対象プログラム１ 112、測定対象プログラム２ 122と時刻補正手段101 と性能分析手段102とから構成されている。なお、クロック・スキュー分析手段100、時刻補正手段101 、と性能分析手段102は、マシン１ 110、マシン２ 120のどちらか、またはマシン1 110、マシン２ 120以外の別のコンピュータに配置することができる。
【００１７】
各マシンは、時計114,124とトレース・データ記録媒体113,123をハードウエアとして備え、トレース・データ記録手段115,125とデータ受信手段121とデータ送信手段111を内蔵するオペレーティング・システム（図示しない）と、測定対象プログラム112,122とを含む。なお、図１において、マシン１側のデータ受信手段、マシン２側のデータ送信手段は図示していない。また、データ受信手段121とデータ送信手段111は、トレース・データ記録手段115,125を呼び出すためのプローブ(図示しない)を含む。これらの手段はそれぞれ概略つぎのように動作する。
【００１８】
マシン１や２に内蔵されているトレース・データ記録手段115,125は、オペレーティング・システム内に設置されたプローブが実行される、すなわち、測定対象イベントが発生することにより呼び出され、そのイベントについての情報をイベント・データとしてトレース・データ記録媒体113,123に記録していく。クロック・スキュー分析手段100は、送信プログラム111が実行されたマシンおよび受信プログラム121が実行されたマシンにてほぼ同時に採取されてトレース・データ記録媒体113,123に記録されたトレース・データを入力として、両マシン間の時計の進み方の違い（クロック・スキュー値）を求める。
【００１９】
時刻補正手段101は、マシン１ 110  、マシン２ 120上で測定対象プログラム112,122を実行させて採取したトレース・データを入力として各種の性能分析を行なう際、前記の手順で求めたクロック・スキュー値を利用してトレース・データ中のタイム・スタンプを補正する。性能分析手段102では、タイム・スタンプの進みが揃った複数のトレース・データを入力して各種の性能分析を行い、分析結果を出力する。
【００２０】
次に、図１、図２及び図３と図４のフローチャートを参照して本発明の実施例の動作について詳細に説明する。
【００２１】
最初に行なうクロック・スキュー分析作業では、まず、マシン１ 110上で送信プログラム111、マシン２ 120上で受信プログラム 121を動作させ、そのときの動作状況を両マシンに含まれるトレース・データ記録手段115,125により記録する。ここで、送信プログラムが行なう送信操作や受信プログラムが行なう受信操作は、各マシンのオペレーティング・システムに含まれるデータ送信手段111やデータ受信手段121により行なわれる。図２と同様に、データ送信手段111とデータ受信手段121にはプローブが設置されており、データ送信操作やデータ受信操作が行なわれたときにトレース・データ記録手段115,125を呼び出すようになっている。トレース・データ記録手段115,125は、プローブを経由して呼び出されると、そのときの時刻をマシンのハードウエアが備える時計114,124より調べてタイム・スタンプ情報を作成し、イベントの種類（どのプローブから呼び出されたのか）を示す情報と合わせてトレース・データ記録媒体113,123に記録する。この操作を測定期間（トレース・データ収集期間）中、継続して実行することにより、トレース・データ記録媒体113,123には、そのマシンで発生したイベントの時系列データ（トレース・データ）が記録される。
【００２２】
図３に送信プログラム111の動作フローを示す。送信プログラム111には、起動時のパラメータとして、通信相手、通信回数、通信間隔を与える。起動直後に、前記３つのパラメータを読み込むと、指定された通信相手にデータを送って指定された通信間隔待つ、という操作を指定された通信回数繰り返した後、通信相手に通信終了を通知する。また、図４に受信プログラム121の操作フローを示す。受信プログラム121には、起動時のパラメータとして、通信相手を与える。起動直後に、前記のパラメータを読み込むと、指定された通信相手からのデータ到着を待つ。データが到着するとそのデータを受信し、そのデータが通信終了を示していなければデータ到着を待つステップに戻る。受信したデータが通信終了を示すデータの場合は、プログラムを終了する。
【００２３】
通信回数を５回、通信間隔を１秒、通信相手をマシン２ 120とした送信プログラム111をマシン１ 110、通信相手をマシン１ 110とした受信プログラム121をマシン２ 120で動作させ、そのときのイベント・トレースを採取することを考える。図５は、送信操作と受信操作のタイム・チャートである。斜めの矢印がマシン間の通信を示しており、矢印の根元が送信操作、矢印の先が受信操作に対応している。図12（従来の課題）での設定と同様、マシン２ 120の時計 124はマシン１ 110の時計114に対して0.0001倍進んでおり、簡単のため時刻0では両マシンの時計は一致している状況を考える。また、ここでも、マシン１ 110の時計114が示す値を絶対時刻と呼ぶことにする。
【００２４】
マシン１ 110が絶対時刻1で送信操作を行なった通信は、絶対時刻1.001でマシン２ 120が受信操作を行なう。この受信操作の時刻をマシン２ 120の時計124で調べると、1.001の1.0001倍である1.0011001となる。同様に、マシン１ 110が、絶対時刻2, 3, 4, 5秒で送信操作を行なった通信は、絶対時刻2.001, 3.001, 4.001, 5.001（マシン２ 120の時計124は2.0012001, 3.0013001, 4.0014001, 5.0015001秒を示す）でマシン２ 120が受信操作を行なう。以上より、マシン１ 110で採取した通信操作のトレース・データは図６、マシン２ 120で採取した通信操作のトレース・データは図７となる。図６、図７では、送信時刻をtsn（n=1,2,…,N）, 受信時刻をtrn（n=1,2,…,N）として表記し、本実施例の値を()内に示した。なお、各トレース・データのタイムスタンプ（時刻）は各マシンが内蔵する時計から得ているため、マシン２  120のトレース・データについてはタイムスタンプ（時刻欄）の値は絶対時刻とは一致していない。
【００２５】
図８は、図６と図７のトレース・データより、各通信操作についての受信時刻（以降、tn表記）と通信時間（以降、τnと表記）の関係を示したものである。この、tnとτnの関係を直線で近似する場合、その傾き（a）は、両マシンが内蔵する時計の進み方の違い（クロック・スキュー値）を示しており、図9に示す式（最小二乗法）で求めることができる。この式に図８中の()内の値、および、項目数N=5を入れて計算すると、a = -0.00009999が求まる。なお、本実施例では、簡単のため、測定誤差の入らない数値を用いて説明したが、実際の測定では誤差等のため、測定点は直線上に乗ることはなく、図10に示すように近似の直線からずれることになる。本実施例では最小自乗法を用いたのは、このような状況下での最適な近似直線を求めるためである。
【００２６】
次に、上記の手順で求めたクロック・スキュー値を適用する手順を説明する。マシン１  110とマシン２ 120上で任意の測定対象プログラム１ 112と測定対象プログラム２ 122を動作させて採取したイベント・トレースにクロック・スキュー値を適用するのは、時刻補正手段 101である。時刻補正手段101は、前記クロック・スキュー分析手段 100によって求めたクロック・スキュー値とマシン１  110とマシン２ 120で採取されたトレース・データを入力とする。本実施例の場合、マシン１  110で採取されたトレース・データに含まれるタイム・スタンプはそのままとし、マシン２ 120で採取されたトレース・データに含まれる総てのイベント・データ内のタイム・スタンプ値（ｔ）を、tc = t×(1+a) で置き換える。ここでtcは補正後のタイム・スタンプ値、aはクロック・スキュー値である。図11のイベント・トレースに対してクロック・スキュー値（-0.00009999）を適用すると、マシン２の送信時刻や受信時刻を示すタイム・スタンプは、図13に示す通り補正される。この補正されたタイム・スタンプ値を使って通信時間（受信時刻  送信時刻）を計算すると図14となる。時刻の経過に関わらず、通信時間は0.001秒と計算されているので、マシン２  120のタイム・スタンプがマシン１  110のタイム・スタンプ（絶対時刻）と同じ進みに補正されていることが分かる。
【００２７】
次に、本発明の第一の実施例の効果について説明する。
【００２８】
本発明の実施例では、送信プログラムと受信プログラムを複数の測定対象マシン上で動作させて採取したイベント・トレースの分析により求めたクロック・スキュー値を利用し、任意の測定プログラムを前記測定対象マシン上で動作させて採取したイベント・トレース中のタイム・スタンプを時刻補正手段により補正するため、各種性能分析手段は、複数の測定対象マシンで採取された複数のトレース・データは、タイム・スタンプの進みが揃っているものとして各種の性能分析を行なうことができる。すなわち、各種の性能分析を行なうプログラムの構造を単純化することができる。
次に、本発明の第二の実施例の構成について説明する。この実施例でも、次に、図１、図２の構成及び図３と図４のフローチャートは同じである。
【００２９】
第一の実施例と同様、通信回数を５回、通信間隔を１秒、通信相手をマシン２  120とした送信プログラム111をマシン１ 110、通信相手をマシン１ 110とした受信プログラム121をマシン２ 120で動作させて採取したイベント・トレースから、各通信操作についての受信時刻と通信時間を調べた結果を図15に示す。これは、4回目の通信操作においてマシン２ 120にデータが到着してから受信操作が実行されるまでに時間がかかったため、見かけ上、通信時間が長くなっている例である。これは、マシンにデータが到着した瞬間において、そのマシンで受信操作よりも優先度の高い処理を行なっている場合に起きる現象である。図15の全データを用い、第一の実施例と同じ最小自乗法により５点を通る近似直線を求めると、その傾き（図9の式によるスキュー値）は約0.000964、τ軸の切片は約0.000124となる。すなわち、τ=0.000964・ｔｒ + 0.000124で図15に示す５点が近似されるわけである。
【００３０】
第二の実施例では、次に、図15の各点について、tr1〜tr5を代入してτの予測値、すなわち、近似直線上の点と測定点とのτ軸方向の差分を取る。この様子を図16（図中のスペースの関係でe4とe5のみ記載）に示す。図15のデータについてもとめたe1〜e5は、各々、0.0000103343, -0.000853994, -0.001718322, 0.006008958, -0.003446977となる。次に、予め決めておいた誤差の閾値（本実施例では0.001とする）とe1〜e5の各点を比較する。その結果、閾値を越えた点が存在する場合は、求めたクロック・スキュー値を無効とし、最も大きく閾値を越えた点（本実施例ではtr4-τ4の点）を除いた点で超えた点を除いた点で近似直線を求める。図15のデータの場合、点tr4-τ4を除いた点で求めた近似直線は全測定点上を通ることになるので、予測値と実測値の差（誤差）であるe1〜e3とe5はゼロとなる。近似直線を求めるために使用した総ての点で誤差が予め決めておいた誤差の閾値（本実施例では0.001とする）よりも小さくなっているので、ここで求めたクロック・スキュー値をクロック・スキュー分析手段 100の結果とする。
【００３１】
なお、クロック・スキュー値を適用する手順は、第一の実施例と同じである。
【産業上の利用可能性】
【００３２】
本発明によれば、ほぼ同じ時間帯に複数の測定対象マシンで採取したトレース・データを入力として、そのデータに記録されているマシン間で行なわれた通信操作に関するイベント情報を利用して性能分析を実施する性能分析装置（プログラム）といった用途に適用できる。
【図面の簡単な説明】
【００３３】
【図１】本発明の実施例の構成図である。
【図２】従来技術を示す構成図である。
【図３】送信プログラムの動作フローを示す図である。
【図４】受信プログラムの操作フローを示す図である。
【図５】送信操作と受信操作のタイム・チャートである。
【図６】マシン１で採取した通信操作のトレース・データの例を示す図である。
【図７】マシン２で採取した通信操作のトレース・データの例を示す図である。
【図８】各通信操作についての受信時刻と通信時間の関係を示す図である。
【図９】両マシンが内蔵する時計の進み方の違いを最小二乗法で直線で近似する式を示す図である。
【図１０】直線による近似と測定値の関係を示す図である。
【図１１】各マシンの時刻関係を示す図である。
【図１２】各マシンの時刻関係を表で表した図である。
【図１３】タイムスタンプの補正を示す図である。
【図１４】補正されたタイム・スタンプ値による通信時間を示す図である。
【図１５】第二の実施例における各通信操作についての受信時刻と通信時間を示す図である。
【図１６】第二の実施例における近似直線上の点と測定点との差分を示す図である。
【符号の説明】
【００３４】
100  クロック・スキュー分析手段  
101  時刻補正手段  
102  性能分析手段  
110  マシン１  
111  マシン１の送信プログラム
112  マシン１の測定対象プログラム
113  マシン１のトレース・データ記録媒体
114  マシン１の時計
115  マシン１のトレース・データ記録手段
120  マシン２  
121  マシン２の受信プログラム
122  マシン２の測定対象プログラム
123  マシン２のトレース・データ記録媒体
124  マシン２の時計
125  マシン２のトレース・データ記録手段
200  マシン  
201  時計  
202  トレース・データ記録媒体  
210  オペレーティングシステム  
211  データ受信手段  
212  データ送信手段  
213  トレース・データ記録手段  
220  アプリケーションプログラム  
【図１】
0004479660.tif 000002
【図２】
0004479660.tif 000003
【図３】
0004479660.tif 000004
【図４】
0004479660.tif 000005
【図５】
0004479660.tif 000006
【図６】
0004479660.tif 000007
【図７】
0004479660.tif 000008
【図８】
0004479660.tif 000009
【図９】
0004479660.tif 000010
【図１０】
0004479660.tif 000011
【図１１】
0004479660.tif 000012
【図１２】
0004479660.tif 000013
【図１３】
0004479660.tif 000014
【図１４】
0004479660.tif 000015
【図１５】
0004479660.tif 000016
【図１６】
0004479660.tif 000017