(57)【要約】【課題】利用者がデータの検索を行うメタデータ自動収集システムにおいて、データ収集先リストを自動的に効率よく修正できるようにする。【解決手段】メタデータ自動収集システムにおいて、利用者の認証を実施し利用者がメタデータを検索した場合、統計データを統計データベース１１２に蓄積する。統計データから統計解析手段１０７によりメタデータの分類毎に統計解析を実施し、データ収集先リスト１０９からデータ収集先を変更する。【効果】必要ないデータ収集を抑止することにより、メタデータ蓄積用データベースの蓄積媒体の使用効率が向上される。【選択図】　図１
2004062258.tif 000002
【特許請求の範囲】
【請求項１】
データ収集先を分類分けしたデータ収集先リストをもとに、インターネット上の多数のサーバが公開しているホームページからデータを収集する手段と、
メタデータフォーマットをもとにメタデータに編集する手段と、
メタデータを分類しデータベースに登録する手段と、
利用者認証が成功した利用者がメタデータを検索した時、利用者の属性と利用者が検索したメタデータの分類と参照回数をデータベースに蓄積する手段と、
メタデータの分類毎に、データベースに蓄積した参照回数と利用者の属性の比率から、統計解析を行い、データ収集先リストから除外するデータ収集先の分類を変更する候補を抽出する手段と、
データ収集先リストから抽出した候補をもとに分類の削除と分類分けを変更する手段とを有することを特徴とするメタデータ自動収集システムのデータ収集先自動変更システム。
【請求項２】
請求項１に記載の、データ収集先を分類分けしたデータ収集先リストをもとに、インターネット上の多数のサーバが公開しているホームページからデータを収集し、メタデータフォーマットをもとにメタデータに編集し、メタデータを分類しデータベースに登録し、利用者端末から登録済みメタデータを検索するメタデータ自動収集システムにおいて、
利用者端末からメタデータを検索するため利用者認証し、認証が成功した利用者がメタデータを検索した時、利用者の属性と利用者が検索したメタデータの分類と参照回数をデータベースに蓄積し、
メタデータの分類毎に、データベースに蓄積した参照回数と利用者の属性の比率から、統計解析を行い、データ収集先リストから除外するデータ収集先の分類とデータ収集先の分類分けを変更する候補を抽出し、
データ収集先リストから抽出した候補をもとに分類の削除を実施することを特徴とするメタデータ自動収集システムのデータ収集先自動変更方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明はデータの収集登録を行い、利用者がデータの検索を行うメタデータ自動収集システムに関し、特に、データ収集先リストを効率よく修正するのに好適なデータ収集先自動変更方法に関する。
【０００２】
【従来の技術】
インターネット上の多数のサーバが公開しているホームページにおいては、ホームページ上のデータ更新が日々行われている。各サーバで公開されているデータを収集し、一箇所に蓄積することにより、収集した広範囲のデータを一つのインターフェースで検索するシステムを利用者に提供可能となる。このような検索システムにおいては、データ収集、リンク先データ収集、およびデータの一定期間毎の再収集が行われ、データ収集システムが構築されている。
【０００３】
このようなインターネット上のデータ収集システムにおいて、従来システム（特開２０００−３３９３１６号公報）では、利用者に検索させる提供データをデータベースに蓄積するにあたり、利用者の検索語を蓄積し、利用頻度の高い検索語のリンク先をデータ収集先リストに追加することにより、データ収集の効率化を実施している。
【０００４】
【発明が解決しようとする課題】
従来のインターネット上のデータ収集システムは、利用者に検索させる提供データを用意しデータベースに蓄積するにあたり、データの収集、データ変換、およびデータ登録は自動的に実施することができたが、データをデータ収集先から、収集しつづけるという問題点があった。
【０００５】
本発明の目的は、データ収集先の変更を自動に実施することにより、システム管理者の収集先リストのメンテナンスの負担を軽減し、また、必要のないデータ収集を抑止することによる、データ蓄積媒体の使用効率の向上を可能とする方法を提供することにある。
【０００６】
【課題を解決するための手段】
上記目的を達成するため、本発明のシステムはデータ収集先を分類分けしたデータ収集先リストをもとに、インターネット上の多数のサーバが公開しているホームページからデータを収集するデータ収集手段と、メタデータフォーマットをもとに収集したデータからメタデータを作成するメタデータ作成手段と、メタデータを分類しデータベースに登録するメタデータ登録手段と、利用者認証が成功した利用者がメタデータを検索した時、利用者の属性と利用者が検索したメタデータの分類と参照回数をデータベースに蓄積する統計データ登録手段と、メタデータの分類毎に、データベースに蓄積した参照回数と利用者の属性の比率から、統計解析を行い、データ収集先リストから除外するデータ収集先の分類とデータ収集先の分類分けを変更する候補を抽出する統計解析手段と、データ収集先リストから抽出した候補をもとに分類を変更するデータ収集先変更手段とを備える。
【０００７】
メタデータ自動収集システムにおいて、利用者端末からメタデータベースに蓄積されたメタデータを検索するため、利用者データベースに対し利用者認証を実施し、認証が成功した利用者がメタデータを検索した場合、利用者ＩＤと利用者属性と利用者が検索したメタデータの分類と参照回数をデータベースに蓄積する。
【０００８】
システム管理者が設定した期間経過後、蓄積した統計情報よりメタデータの分類毎に、データベースに蓄積した参照回数と利用者の属性の比率から、統計解析を行い、データ収集先リストから除外するデータ収集先の分類の候補を抽出し、データ収集先リストから抽出した候補をもとに分類の削除を実施する。
【０００９】
これにより、必要ないデータ収集の抑止が可能となり、メタデータ蓄積用データベースの蓄積媒体の使用効率の向上が可能となる
【００１０】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
【００１１】
図１は、本発明の実施例であるメタデータ収集システムの全体構成の図を示したものである。
【００１２】
１０１はデータの収集先となる外部サーバ、１０２はメタデータ収集サーバ、１０３はデータ収集手段、１０４はメタデータ作成手段、１０５はメタデータ登録手段、１０６は統計データ登録手段、１０７は統計解析手段、１０８はデータ収集先変更手段、１０９はデータ収集先サーバを登録しておくデータ収集先リスト、１１０は利用者データを登録しておく利用者データベースを格納する外部記憶装置、１１１は収集したメタデータを登録しておくメタデータデータベースを格納する外部記憶装置、１１２は統計データを登録しておく統計データベースを格納する外部記憶装置、１１３は利用者端末である。
【００１３】
データを収集してからデータ収集先の変更までの方法は、図５に示すデータ収集先変更方法に従い実施される。
【００１４】
図２は、利用者データベース１１０のテーブル構造である。図５において、利用者認証を実施する場合に参照する。テーブルには、利用者番号、利用者属性、利用者氏名等の利用者情報を利用者毎に登録する。
【００１５】
図３は、統計データベース１１２のテーブル構造である。図５において、利用者認証が成功した利用者がメタデータデータベース５０７に対し検索を実施した場合にデータが登録される。統計解析手段５１１による統計解析を行う場合に参照する。テーブルには、検索を実施した利用者番号、利用者属性、ログイン日付、ログアウト日付、参照データ分類等のデータを、利用者のログイン毎に登録する。
【００１６】
図４は、データ収集先リスト１０９の内容である。データ収集手段５０２において、データ収集する場合に参照する。データ収集先を分野毎に分類し、分類名を設定する。データ収集手段５０２において収集先のＵＲＬを分類毎に設定し、該当する分類のデータ収集の再収集を実施する収集頻度を設定し、設定したＵＲＬのリンク先を何階層まで収集するかを収集階層に設定する。
【００１７】
図５は、図１のメタデータ自動収集システムにおけるデータ収集先自動変更方法である。
【００１８】
図５において、５０１はインターネット上の各サーバが公開しているホームページ、５０２は各サーバで公開しているデータを収集するデータ収集手段、５０３は収集した文書データ、５０４は収集した文書データからメタデータを生成するメタデータ作成手段、５０５はメタデータファイル、５０６はメタデータデータベースにメタデータファイルを登録するメタデータ登録手段、５０７はメタデータデータベースを登録しておく外部記憶装置、５０８は統計データベースを登録しておく外部記憶装置、５０９は利用者データベースを登録しておく外部記憶装置、５１０は利用者端末、５１１は統計データベースに登録した統計データから統計解析を実施する統計解析手段、５１２は統計解析結果からデータ収集先リストを変更するデータ収集先変更手段、５１３はデータ収集先リストである。
【００１９】
データ収集手段５０２はデータ収集先リスト５１３に記述されている分類のＵＲＬ毎各サイトから文書データ５０３の自動収集を行う。メタデータ作成手段５０４は、各サイトから収集した文書データ５０３から、データ毎にメタデータ５０５を自動作成を行う。メタデータ登録手段５０６はメタデータ５０５をメタデータデータベース５０７に登録可能な形式に自動変換し、メタデータデータベース５０７に自動登録を行う。
【００２０】
利用者が利用者端末５１０からメタデータデータベース５０７のデータを検索する場合、利用者データベース５０９に対し利用者認証を行い、認証が成功した場合データの検索を行うことができる。統計データ登録手段５１１は利用者の利用者番号、利用者属性、ログイン日時、ログアウト日付、参照データの分類を統計データベース５０８に登録を行う。
【００２１】
統計解析手段５１２により、統計データベース５０８に登録されたデータから、データ収集先リスト５１４に記述されているデータ分類毎に、参照回数、全参照回数における参照回数の比率、参照した利用者の属性の比率の統計解析を行う。データ収集先変更手段５１３は、統計解析手段５１２の統計解析結果から、参照回数、参照回数の比率の低いデータ分類をデータ収集先リスト５１４から除外する。データ収集先変更手段５１３は、除外対象のデータ分類に対し、利用者の属性の比率を確認し属性の高い利用者の利用が多い場合、またはシステム管理者の設定した除外禁止データ分類の場合は除外対象から外す。
【００２２】
【発明の効果】
以上説明したように、本発明によれば、メタデータ収集先の変更を自動に実施することにより、システム管理者のメンテナンスの負担を軽減することが可能であり、必要ないデータ収集を抑止することにより、メタデータ蓄積用データベースの蓄積媒体の使用効率の向上が可能となる。
【図面の簡単な説明】
【図１】発明の実施の形態を示すシステム構成の全体構成を示した図。
【図２】図１における利用者データベースのテーブル構造を示した図。
【図３】図１における統計データベースのテーブル構造を示した図。
【図４】図１におけるデータ収集先リストを示した図。
【図５】図１におけるデータ収集先変更方法を示した図。
【符号の説明】
１０２…メタデータ収集サーバ、１０３…データ収集手段、１０４…メタデータ作成手段、１０５…メタデータ登録手段、１０６…統計データ登録手段、１０７…統計解析手段、１０８…データ収集先変更手段、１０９…データ収集先リスト、１１０，１１１，１１２…外部記憶装置、１１３…利用者端末。
【図１】
2004062258.tif 000003
【図２】
2004062258.tif 000004
【図３】
2004062258.tif 000005
【図４】
2004062258.tif 000006
【図５】
2004062258.tif 000007