(57)【要約】  本発明は、ネットワークテスト方法及びそのデータ収集方法、ネットワークテスト装置及びシステムを提供し、ネットワークにテストを行う場合、ネットワークテスト装置が、ジョブに応じて、対応するデータ収集指令を生成し、ネットワーク管理システムに送信し、ネットワーク管理システムにより該収集指令に基づいて自動に対応するデータを収集し、収集したデータをネットワークテスト装置にフィードバックして後続の分析等の処理を行う。つまり、本発明によると、具体的なジョブに応じて、ネットワーク管理システムにデータ収集指令を送信し、ネットワーク管理システムが自動に対応するデータを取得することで、人工でテストデータを収集する必要がないので、データ収集のコストを低減すると共に、データ収集効率を向上させることができる。且つ、データ収集において、人間の技能、天気、地理環境、交通状況、治安等の各種の要素の制限を受けることがないので、データ収集の安定性を保証し、さらに後続のネットワークテストの正確性を保証する。
2016527786.tif 000002
【特許請求の範囲】
【請求項１】
ネットワークテスト装置が、ジョブに応じて、対応するデータ収集指令を生成し、ネットワーク管理システムに送信することと、
前記ネットワーク管理システムが、前記収集指令に応じて、対応するデータを収集し、収集したデータを前記ネットワークテスト装置にフィードバックすることと、を含むネットワークテストデータ収集方法。
【請求項２】
前記ネットワーク管理システムが前記収集指令に応じて対応するデータを収集することは、
前記ネットワーク管理システムが、前記収集指令に応じて、対応するデータ収集操作指令を生成し、対応するネットワークエレメントに送信することと、
前記ネットワークエレメントが、前記データ収集操作指令に応じて、データを収集し、収集したデータを前記ネットワーク管理システムにフィードバックすることと、を含む請求項１に記載のネットワークテストデータ収集方法。
【請求項３】
前記ジョブは、特定テーマ分析ジョブ、モニタリングジョブ又はテストジョブである請求項１又は２に記載のネットワークテストデータ収集方法。
【請求項４】
前記ネットワーク管理システムは、無線アクセスネットワーク・ネットワーク管理システム及び/又は移動コアネットワーク・ネットワーク管理システムを含む請求項１又は２に記載のネットワークテストデータ収集方法。
【請求項５】
ネットワークテスト装置が、ジョブに応じて、対応するデータ収集指令を生成し、ネットワーク管理システムに送信することと、
前記ネットワーク管理システムが、前記収集指令に応じて、対応するデータを収集し、収集したデータを前記ネットワークテスト装置にフィードバックすることと、
前記ネットワークテスト装置が、受信したデータを分析することと、を含むネットワークテスト方法。
【請求項６】
前記ネットワークテスト装置が受信したデータを分析することは、
前記ネットワークテスト装置が、受信したデータをまとめて、ユーザマークデータ、制御データ、ユーザデータに従って分離することと、
前記ネットワークテスト装置が、分離されたデータをユーザ業務フローと時間に応じて再び組み合せすることと、
前記ネットワークテスト装置が、再び組み合せされたデータを分析して、問題が存在するか否を判断することと、を含む請求項５に記載のネットワークテスト方法。
【請求項７】
前記ネットワークテスト装置が、再び組み合せされたデータを分析して問題が存在するか否を判断することは、
前記データが属される業務及び業務タイプに基づいて、対応する業務品質指標を選択し、また前記業務品質指標の値を統計し、前記業務品質指標の値と前記業務品質指標の閾値に基づいて、前記データが属される業務に業務品質問題が存在するか否かを判断することと、
及び/又は、
前記データが属される業務の業務フロー中の異常原因、交換シグナル、測定報告、リソース消費情報、ネットワークエレメントハードウェア情報の中の少なくとも一つを分析し、ネットワーク問題が存在するか否かを確定することと、を含む請求項６に記載のネットワークテスト方法。
【請求項８】
前記ネットワークテスト装置が再び組み合せされたデータに基づいて分析して問題が存在する場合、
予め定義した問題ルールベースに基づいて、問題の具体的なタイプを確定することを更に含む請求項７に記載のネットワークテスト方法。
【請求項９】
問題のタイプを確定した後、
確定した問題及び該問題を分析した依拠を記憶し、ネットワーク運用維持者に通知することを更に含む請求項８に記載のネットワークテスト方法。
【請求項１０】
設定したジョブに応じて、対応するデータ収集指令を生成し、ネットワーク管理システムに送信するように設けられるジョブ設定モジュールと、
前記ネットワーク管理システムが前記収集指令に応じて収集したデータを処理し、処理後のデータをデータ分析モジュールに送信するように設けられたデータ処理モジュールと、
受信したデータを分析するように設けられたデータ分析モジュールと、を含むネットワークテスト装置。
【請求項１１】
前記データ処理モジュールは、前記ネットワーク管理システムから送信されたデータをまとめてから、ユーザマークデータ、制御データ、ユーザデータに応じて分離し、分離されたデータをユーザ業務フローと時間に基づいて再び組み合せするように設けられる請求項１０に記載のネットワークテスト装置。
【請求項１２】
前記データ分析モジュールは、前記データが属される業務及び業務タイプに基づいて、対応する業務品質指標を選択し、また前記業務品質指標の値を統計し、前記業務品質指標の値と前記業務品質指標の閾値に基づいて、前記データが属される業務に業務品質問題が存在するか否かを判断し、及び/又は、前記データが属される業務の業務フロー中の異常原因、交換シグナル、測定報告、リソース消費情報、ネットワークエレメントハードウェア情報の中の少なくとも一つを分析して、ネットワーク問題が存在するか否かを確定するように設けられる請求項１１に記載のネットワークテスト装置。
【請求項１３】
ネットワーク管理システムと、前記ネットワーク管理システムと通信回線で接続されたネットワークエレメントと、請求項１０乃至１２の中のいずれかに記載のネットワークテスト装置と、を含み、前記ネットワークテスト装置と前記ネットワーク管理システムが通信回線で接続されるネットワークテストシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通信分野に関し、具体的に、ネットワークテスト方法及びそのデータ収集方法、ネットワークテスト装置及びシステムに関するものである。
【背景技術】
【０００２】
無線ネットワークの構築、運用維持において、ユーザやネットワークエレメントにテストや問題分析を行うことは日常のネットワーク維持の基礎的な作業で、現在、主には人工ロードテスト方式で実現し、即ち、専門者が専用機器を持って、車両を利用して、又は歩いてテストデータを収集した後、収集したデータの再生、人工データ分析を経て、ネットワークの問題又は業務品質問題を発見する。人間の原価、原油価格の上昇等によって、人工ロードテストを行う固定コストがますます高くなっているが、人工ロードテストによるデータ収集率は比較的に低く、且つ、人工ロードテストはさらに、人間の技能、天気、地理環境、交通状況、治安等の各種の要素の制限を受けて、実施フローや収集効果が低下していて、ネットワークテスト効果も悪くなっている。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
本発明の実施例は、既存のネットワークテストを行う際人工でデータを収集するコストが高く、効率が低く、データ収集効果が悪いのでネットワークテスト分析効果が悪い問題を解決できるネットワークテスト方法及びそのデータ収集方法、ネットワークテスト装置及びシステムを提供することをその目的とする。
【課題を解決するための手段】
【０００４】
上述した技術課題を解決するため、本発明の実施例は、ネットワークテスト装置が、ジョブに応じて、対応するデータ収集指令を生成し、ネットワーク管理システムに送信することと、前記ネットワーク管理システムが、前記収集指令に応じて、対応するデータを収集し、収集したデータを前記ネットワークテスト装置にフィードバックすることと、を含むネットワークテストデータ収集方法を提供する。
【０００５】
本発明の一実施例において、前記ネットワーク管理システムが前記収集指令に応じて対応するデータを収集することは、前記ネットワーク管理システムが、前記収集指令に応じて、対応するデータ収集操作指令を生成し、対応するネットワークエレメントに送信することと、前記ネットワークエレメントが、前記データ収集操作指令に応じて、データを収集し、収集したデータを前記ネットワーク管理システムにフィードバックすることと、を含む。
【０００６】
本発明の一実施例において、前記ジョブは、特定テーマ分析ジョブ、モニタリングジョブ又はテストジョブである。
【０００７】
本発明の一実施例において、前記ネットワーク管理システムは、無線アクセスネットワーク・ネットワーク管理システム及び/又は移動コアネットワーク・ネットワーク管理システムを含む。
【０００８】
上述した技術課題を解決するため、本発明の実施例によると、ネットワークテスト装置が、ジョブに応じて、対応するデータ収集指令を生成し、ネットワーク管理システムに送信することと、前記ネットワーク管理システムが、前記収集指令に応じて、対応するデータを収集し、収集したデータを前記ネットワークテスト装置にフィードバックすることと、前記ネットワークテスト装置が、受信したデータを分析することと、を含むネットワークテスト方法を提供する。
【０００９】
本発明の一実施例において、前記ネットワークテスト装置が受信したデータを分析することは、前記ネットワークテスト装置が、受信したデータをまとめて、ユーザマークデータ、制御データ（Control Plane）、ユーザデータ（User plane）に従って分離することと、前記ネットワークテスト装置が、分離されたデータをユーザ業務フローと時間に応じて再び組み合せすることと、前記ネットワークテスト装置が、再び組み合せされたデータを分析して問題が存在するか否を判断することと、を含む。
【００１０】
本発明の一実施例において、前記ネットワークテスト装置が、再び組み合せされたデータを分析して問題が存在するか否を判断することは、前記データが属される業務及び業務タイプに基づいて、対応する業務品質指標を選択し、また前記業務品質指標の値を統計し、前記業務品質指標の値と前記業務品質指標の閾値に基づいて、前記データが属される業務に業務品質問題が存在するか否かを判断することと、及び/又は、前記データが属される業務の業務フロー中の異常原因、交換シグナル、測定報告、リソース消費情報、ネットワークエレメントハードウェア情報の中の少なくとも一つを分析し、ネットワーク問題が存在するか否かを確定することと、を含む。
【００１１】
本発明の一実施例において、前記ネットワークテスト装置が再び組み合せされたデータに基づいて分析して問題が存在する場合、予め定義した問題ルールベースに基づいて、問題の具体的なタイプを確定することを更に含む。
【００１２】
本発明の一実施例において、問題のタイプを確定した後、確定した問題及び該問題を分析した依拠を記憶し、ネットワーク運用維持者に通知することを更に含む。
【００１３】
上述した技術問題を解決するため、本発明の実施例によると、設定したジョブに応じて対応するデータ収集指令を生成し、ネットワーク管理システムに送信するように設けられるジョブ設定モジュールと、前記ネットワーク管理システムが前記収集指令に応じて収集したデータを処理し、処理後のデータをデータ分析モジュールに送信するように設けられたデータ処理モジュールと、受信したデータを分析するように設けられたデータ分析モジュールと、を含むネットワークテスト装置を提供する。
【００１４】
本発明の一実施例において、前記データ処理モジュールは、前記ネットワーク管理システムから送信されたデータをまとめてから、ユーザマークデータ、制御データ、ユーザデータに応じて分離し、分離されたデータをユーザ業務フローと時間に基づいて再び組み合せするように設けられる。
【００１５】
本発明の一実施例において、前記データ分析モジュールは、前記データが属される業務及び業務タイプに基づいて、対応する業務品質指標を選択し、また前記業務品質指標の値を統計し、前記業務品質指標の値と前記業務品質指標の閾値に基づいて、前記データが属される業務に業務品質問題が存在するか否かを判断し、及び/又は、前記データが属される業務の業務フロー中の異常原因、交換シグナル、測定報告、リソース消費情報、ネットワークエレメントハードウェア情報の中の少なくとも一つを分析して、ネットワーク問題が存在するか否かを確定するように設けられる。
【００１６】
上述した問題を解決するため、本発明の実施例によると、ネットワーク管理システムと、前記ネットワーク管理システムと通信回線で接続されたネットワークエレメントと、上述したネットワークテスト装置と、を含み、前記ネットワークテスト装置と前記ネットワーク管理システムが通信回線で接続されるネットワークテストシステムを提供する。
【発明の効果】
【００１７】
本発明の実施例によると以下の有益な効果を実現できる：
本発明の実施例で提供するネットワークテスト方法及びそのデータ収集方法、ネットワークテスト装置及びシステムによると、ネットワークにテストを行うにおいて、ネットワークテスト装置が、ジョブに応じて対応するデータ収集指令を生成してネットワーク管理システムに送信し、ネットワーク管理システムにより該収集指令に基づいて自動的に対応するデータを収集し、収集したデータをネットワークテスト装置にフィードバックして後続の自動化分析等の処理を行う。つまり、本発明の実施例は、具体的なジョブに応じてネットワーク管理システムにデータ収集指令を送信し、ネットワーク管理システムにより自動に対応するデータを取得し、人工でテストデータの収集を完成する必要がないので、データ収集コストを低減できる共に、データ収集効率を向上させることができる。且つ、データ収集において、人間の技能、天気、地理環境、交通状況、治安等の各種の要素の制限を受けることがないので、データ収集の安定性を保証し、さらに後続のネットワークテストの正確性を保証する。
【図面の簡単な説明】
【００１８】
【図１】本発明の実施例１で提供するテストデータ収集フローを示す図である。
【図２】本発明の実施例１で提供するネットワーク管理システムによるデータ収集フローを示す図である。
【図３】本発明の実施例２で提供するネットワークテストフローを示す図である。
【図４】図３においてデータを分析するフローを示す図である。
【図５】本発明の実施例３で提供するネットワークテストシステムの構造を示す図である。
【図６】本発明の実施例３で提供するネットワークテスト装置の構造を示す図である。
【図７】本発明の実施例４で提供するネットワークテストフローを示す図である。
【発明を実施するための形態】
【００１９】
以下、具体的な実施形態と図面を結合して本発明をさらに詳しく説明する。
通常、ネットワークのテストは、ネットワークテストデータの収集フローと、収集したデータに基づいて問題を分析するフローとを含み、さらに、分析した問題の位置決めを行うフローをさらに含む。本発明を一層理解するため、以下、本発明を結合して上述した幾つかのフローをそれぞれ説明する。
【００２０】
（実施例１）
図１を参照すると、本実施例において、ネットワークテストにおいてテストデータの収集フローは以下のとおりである。
ネットワークテスト装置が、ジョブに応じて対応するデータ収集指令を生成してネットワーク管理システムに送信する（ステップ１０１）。
ネットワーク管理システムが、受信した収集指令に基づいて、対応するデータを収集する（ステップ１０２）。
ネットワーク管理システムが、収集したデータをネットワークテスト装置にフィードバックする（ステップ１０３）。
【００２１】
上述したステップから分かるように、本実施例においてテストデータの収集は、具体的なジョブ需要に応じて対応する収集指令を生成し、ネットワーク管理システムにより、該収集指令に基づいて自動的に対応するデータを取得することで完成されるので、人工でデータを収集する必要がなく、又はどのようなデータを収集するべきかを把握する必要がないので、データ収集自動化レベルを向上させると共に、データ収集コストを低減し、データ収集効率を向上させる。且つデータ収集において、人間の技能、天気、地理環境、交通状況、治安等の各種の要素の制限を受けることがないので、データ収集の安定性を保証し、後続のネットワークテストの正確性を保証できる。
【００２２】
本実施例において、ステップ１０１においてネットワークテスト装置が、ジョブに応じて対応するデータ収集指令を生成する際、テストジョブ（例えば、信号強度のテストジョブ、ネットワーク性能のテストジョブ、ネットサーフィン速度のテストジョブ等)、モニタリングジョブ（例えば、業務品質のモニタリングジョブ、業務成功率のモニタリングジョブ、業務警告のモニタリングジョブ等）、特定テーマの分析ジョブ（例えば、遅延分析ジョブ、業務（例えば、ＱＱ、ＷｅＣｈａｔ等の業務）分析ジョブ、ジッタ分析ジョブ、パケットロス率の分析業務等）等の各種のジョブに基づき、各異なるジョブにそれぞれ、対応する時間周期、対象、特定テーマタイプ等を設定し、各ジョブを解析して各ジョブのデータ需要を得て、対応する収集指令を生成する。且つ、本実施例において、異なるジョブのデータ収集フローをそれぞれ単独に行うことができ、且つ後続の問題分析及び問題位置決めもそれぞれ単独に行うことができる。
【００２３】
本実施例において、ネットワーク管理システムは、無線アクセスネットワーク・ネットワーク管理システム及び/又は移動コアネットワーク・ネットワーク管理システムを含むことができ、具体的な応用状況と具体的なジョブタイプに基づいてアプリを選択する。現在のジョブに係わっているユーザ又はネットワークエレメントが無線ネットワークと移動ネットワークとに分布されている場合、無線アクセスネットワーク・ネットワーク管理システム及び/又は移動コアネットワーク・ネットワーク管理システムを介して、対応する収集指令に基づいて、それぞれ対応するデータを収集してからまとめて後続の問題分析等を行わなければならず、現在のジョブに係わっているネットワークエレメント又はユーザが無線ネットワーク又は移動ネットワークに分布されている場合、対応して、無線アクセスネットワーク・ネットワーク管理システム又は移動コアネットワーク・ネットワーク管理システムのみによって、データの収集を完成する。図２に示すように、ネットワーク管理システムはネットワークテスト装置から送信された収集指令に応じて、対応するデータを収集するフローは、以下のステップを含む。
ネットワーク管理システムが、受信した収集指令に基づいて、対応するデータ収集操作指令を生成して対応するネットワークエレメントに送信し（ステップ２０１）、
ネットワークエレメントが、受信したデータ収集操作指令に基づいて、データを収集し、収集したデータをネットワーク管理システムにフィードバックする（ステップ２０２）。
【００２４】
本実施例において、ネットワーク管理システムが上述したフローを経て収集したデータは、業務全体における関連データを含むことができ、つまり、ユーザマークデータ、ユーザデータを含むことができ、さらに制御データ等を含むこともできる。既存の人工ロードテストの方式に比べ、収集したデータが一層完全、正確、真実である（ロードテスト方式は模擬ユーザ業務方式でデータを収集し、本実施例は実際のユーザ業務中のデータを収集する）。そして、後続の問題分析及び位置決めの正確性の向上に一層有利である。
【００２５】
（実施例２）
本実施例において、ネットワークテスト問題の分析フローは、上述した実施例１中のデータ収集方法に従って収集したデータに問題分析を行うが、上述した実施例１中のデータ収集方法に限定されず、収集したデータがユーザマークデータ、ユーザデータ、制御データ等を含めばよい。以下、上述した実施例１中のデータ収集結果を例に説明し、図３に示すように、該フローは以下のステップを含む。
ネットワークテスト装置が、ジョブに応じて対応するデータ収集指令を生成してネットワーク管理システムに送信し（ステップ３０１）、
ネットワーク管理システムが、受信した収集指令に基づいて、対応するデータを収集し（ステップ３０２）、
ネットワーク管理システムが、収集したデータをネットワークテスト装置にフィードバックし（ステップ３０３）、
ネットワークテスト装置が、ネットワーク管理システムによりフィードバックしたデータを分析する（ステップ３０４）。
【００２６】
図４に示すように、本実施例において、上述したステップ３０４においてネットワークテスト装置が受信したデータを分析することは、
ネットワークテスト装置が、受信したデータをまとめてから、ユーザマークデータ、制御データ、ユーザデータに従って分離し（ステップ３０４１）、
ネットワークテスト装置が、分離されたデータをユーザ業務フローと時間に基づいて、再び組み合せし（ステップ３０４２）、
ネットワークテスト装置が、再び組み合せされたデータを分析して問題が存在するか否を判断し（ステップ３０４３）、具体的に、該データが属される業務の交換フローを分析し、及び/又は該データが属される業務の各業務品質指標を統計し、ユーザ業務フローにネットワーク問題及び/又は業務品質問題が存在するか否かを判断することを含む。本発明を一層理解させるため、以下、具体的な分析フロー（つまり、問題位置決めフロー）を例に本発明をさらに詳しく説明する。
【００２７】
該データが属される業務の交換フローを分析して、ネットワーク問題が存在するか否かを判断する場合、具体的に、データが属される業務の業務中の異常原因、交換シグナル、測定報告、ネットワークエレメントリソース消費情報、ネットワークエレメントハードウェア情報等の中の少なくとも一つを分析して、ネットワーク問題が存在するか否かを判断する。例えば、カバー問題、干渉問題、容量問題、システムパラメータ設定問題、ハードウェア隠れ故障問題等を判断する。
【００２８】
該データが属される業務の各業務品質指標を統計して、業務品質問題が存在するか否かを判断する場合、データが属される業務（例えば、ＱＱ、ＷｅＣｈａｔ、ミニブログ等の業務）及び業務タイプ（例えば、リアルタイムな通信、ビデオ、ＩＰ電話（Ｖｏｉｃｅ  ｏｖｅｒ  ＩＰ、ＶｏＩＰと略称）等）に基づいて、対応する業務品質指標を選択し、これらの業務品質指標の値を統計して、得られた業務品質指標の値と対応する業務品質指標の閾値に基づいて、業務品質問題が存在するか否かを判断する。例えば業務失敗、低レート、高遅延、高パケットロス率等を判断する。
【００２９】
本実施例において、上述した問題位置決めフローを経て問題の種別を決めた後、さらに、予め定義した問題ルールベースに基づいて、問題の具体的なタイプを確定することができ、即ち該問題が発生した具体的な原因を分析することができる。例えば、カバー問題の場合、信号強度、業務実行位置からサービングセルまでの距離、サービングセルのカバー範囲に基づいて、該問題の具体的なタイプが弱いカバー、カバー過ぎ、パイロットの汚染であるかそれともアップリンクのカバーが悪い問題であるかを確定する。
【００３０】
本実施例において、さらに、確定した問題及び該問題を分析した依拠を記憶し、ネットワーク運用維持者に通知することができる。具体的に、警告方式でネットワーク運用維持者に通知し、運用維持者は図形画面によって問題及び問題の具体的なタイプ、判断依拠等を調査することができ、業務全般を再生することもできる。
【００３１】
上述のように、本実施例において、上述した収集方法によって収集したデータに基づいて問題の分析を行う時、真実なユーザ業務中のデータを分析し、業務品質を識別且つ統計することができ、データの分離及び再び組み合せすることで、業務全般を再生して、ネットワーク問題が存在するか否かを分析することができる。業務の模擬、決められた位置での測定、模擬業務の品質評価を必要とせずに、一層真実且つ客観的にユーザ業務の実際の品質や問題を反映することができる。
【００３２】
（実施例３）
本発明を一層理解させるため、以下、完全なテストシステムを例に本発明を詳しく例示する。
図５に示すように、該ネットワークテストシステムは、ネットワーク管理システムと、ネットワーク管理システムと通信回線で接続されたネットワークエレメントと、上述した実施例中のネットワークテスト装置と、を含み、ネットワークテスト装置はネットワーク管理システムと通信回線で接続される。上述した分析によって分かるように、本実施例におけるネットワークエレメントシステムも、無線アクセスネットワーク・ネットワーク管理システム及び/又は移動コアネットワーク・ネットワーク管理システムを含むことができる。
【００３３】
図６示すように、本実施例におけるネットワークテスト装置は、ジョブ設定モジュールと、データ処理モジュールと、データ分析モジュールと、を含み、さらに分析結果表示モジュールを含み、ここで、
ジョブ設定モジュールは、ジョブ設定画面（図形画面等であることができる）を提供し、ユーザが設定したジョブに応じて対応するデータ収集指令を生成してネットワーク管理システムに送信するように構成され、
データ処理モジュールは、ネットワーク管理システムが収集指令に基づいて収集したデータを処理し、処理後のデータをデータ分析モジュールに送信するように構成され、
データ分析モジュールは、受信したデータを分析するように構成される。
【００３４】
本実施例において、データ処理モジュールがネットワーク管理システムが収集指令に基づいて収集したデータを処理することが、
データ処理モジュールが、前記ネットワーク管理システムから送信されたデータをまとめてから、ユーザマークデータ、制御データ、ユーザデータに従って分離し、分離されたデータをユーザ業務フローと時間に基づいて再び組み合せすることを含む。
【００３５】
データ分析モジュールが、再び組み合せされたデータを分析することは、
データ分析モジュールが、データが属される業務及び業務タイプに基づいて、対応する業務品質指標を選択し、前記業務品質指標の値を統計し、前記業務品質指標の値と対応する業務品質指標の閾値に基づいて、前記データが属される業務に業務品質問題が存在するか否かを判断し、
及び/又は、
前記データが属される業務の業務中の異常原因、交換シグナル、測定報告、リソース消費情報、ネットワークエレメントハードウェア情報等の中の少なくとも一つを分析し、ネットワーク問題が存在するか否かを確定することを含む。
【００３６】
データ分析モジュールはさらに、上述した方式で問題の具体的なタイプを分析することができ、ここで説明を省略する。
本実施例における分析結果表示モジュールはさらに、確定した問題及び該問題を分析した依拠を記憶し、ネットワーク運用維持者に通知することができる。具体的に、警告方式でネットワーク運用維持者に通知し、運用維持者は図形画面で問題及び問題の具体的なタイプ、判断依拠等を調査することができ、業務全般を再生することもできる。
【００３７】
（実施例４）
以下、ネットワークテストフロー全体を例に、本発明をさらに説明する。図７示すように、以下のステップを含む。
ユーザが、ネットワークテスト装置が提供した画面でテストジョブ、特定テーマ分析ジョブ又はモニタリングジョブ及び対応するジョブ戦略を設定する（ステップ７０１）。
ネットワークテスト装置が、ジョブタイプ、ジョブ戦略及び対応するジョブの対象に基づいて、複数のデータ収集サブジョブを形成し、ネットワーク管理システムの北向きのインターフェースを介して、各データ収集指令に対し、１セットのマンマシン言語（ＭＭＬ：Ｍａｎ−Ｍａｃｈｉｎｅ  Ｌａｎｇｕａｇｅ、ＭＭＬと略称）命令を生成する（ステップ７０２）。
【００３８】
ネットワークテスト装置が、生成したＭＭＬ命令をネットワーク管理の北向きのインターフェースを介して移動コアネットワーク・ネットワーク管理システムと無線アクセスネットワーク・ネットワーク管理システムに送信する（ステップ７０３）。
移動コアネットワーク・ネットワーク管理システムと無線アクセスネットワーク・ネットワーク管理システムが、ＭＭＬ命令をデータ収集操作可能命令に変換して管理しているネットワークエレメントに送信する（ステップ７０４）。
【００３９】
データ収集操作可能命令に基づいて、無線アクセスネットワークと移動コアネットワークはデータを無線アクセスネットワーク・ネットワーク管理システムと移動コアネットワーク・ネットワーク管理システムに報知する（ステップ７０５）。
無線アクセスネットワーク・ネットワーク管理システムと移動コアネットワーク・ネットワーク管理システムが、受信したデータをデータファイルに生成し、データファイルをネットワークテスト装置に報知する（ステップ７０６）。
【００４０】
ネットワークテスト装置が、二つの部分のデータをまとめて、ユーザデータの核心情報を抽出し、制御データ核心情報を業務フローに基づいて分離し、そして、ユーザ、業務フロー、データタイプ、時間等に従ってデータを再び組み合せする（ステップ７０７）。
識別した業務及び業務タイプに基づいて、適切な指標を選択し、各業務品質指標を統計し、実際に統計した業務品質指標の値と対応する業務品質指標の閾値に基づいて、ユーザ業務中に業務品質問題が存在するか否かを判断し、及び、毎回の業務中の異常原因、交換シグナル、測定報告、リソース消費を分析して、ネットワーク問題が存在するか否かを確定する（ステップ７０８）。
【００４１】
収集したデータを総合に分析し、問題方向を確定し、定義した問題ルールベースに基づいて、原因を細分化する（ステップ７０９）。
警告方式で画面に表示し、ネットワーク運用維持者が問題警告を選択して、問題に関連する状況を調査することができる（ステップ７１０）。
【００４２】
上述のように、本発明のテストデータの収集はネットワーク管理システムにより収集指令に基づいて自動に対応するデータを収集して完成し、人工で収集する必要がなく、データ収集の自動化レベルを向上させると共に、データ収集のコストを低減し、データ収集効率を向上させる。且つ、データ収集において、人間の技能、天気、地理環境、交通状況、治安等の各種の要素の制限を受けることがないので、データ収集の安定性を保証し、後続のネットワークテストの正確性を保証できる。
【００４３】
同時に、ネットワーク管理システムが収集したデータは業務全般の関連データを含むことができ、つまり、ユーザマークデータ、ユーザデータを含むことができ、さらに制御データ等を含むこともできる。既存の人工ロードテスト方式で収集したデータに比べ、一層完全且つ正確であって、同時にデータ量も既存の人工ロードテスト方式で得たデータ量より少なく、後続の問題分析及び位置決めの正確性をさらに有利であって、ネットワークエレメント機器のリソース消費を一層低減できる。
【００４４】
そして、上述した収集方法で収集したデータに基づいて問題の分析を行い場合、分析したのは真実なユーザ業務中のデータで、業務品質を識別且つ統計することができ、データの分離及び再び組み合せによって、業務全般を再生し、ネットワーク問題が存在するか否かを分析することができる。業務の模擬、決められた位置での測定、模擬業務の品質評価を必要とせずに、一層真実且つ客観的にユーザ業務の実際の品質や問題を反映することができる
【００４５】
以上、具体的な実施形態を結合して本発明をさらに詳しく説明したが、本発明の具体的な実施がこれらに限定されることではない。当業者は、本発明の構想から離脱しない範囲で、若干の簡単な推定又は入れ替えを行うことができ、これらはいずれも本発明の保護範囲に含まれる。
【産業上の利用可能性】
【００４６】
本発明で提供する上述した技術案は、ネットワークテストデータの収集に応用でき、ネットワークにテストを行う場合、ネットワークテスト装置が、ジョブに応じて対応するデータ収集指令を生成してネットワーク管理システムに送信し、ネットワーク管理システムにより該収集指令に基づいて自動に対応するデータを収集し、収集したデータをネットワークテスト装置にフィードバックして後続の自動化分析等の処理を行う技術案である。データ収集コストを低減すると共に、データ収集効率を向上させることができる。且つデータ収集において、人間の技能、天気、地理環境、交通状況、治安等の各種の要素の制限を受けることがないので、データ収集の安定性を保証し、さらに後続のネットワークテストの正確性を保証する。
【図１】
2016527786.tif 000003
【図２】
2016527786.tif 000004
【図３】
2016527786.tif 000005
【図４】
2016527786.tif 000006
【図５】
2016527786.tif 000007
【図６】
2016527786.tif 000008
【図７】
2016527786.tif 000009
【国際調査報告】
2016527786.tif 000010
2016527786.tif 000011
2016527786.tif 000012
2016527786.tif 000013