■デ変研 TF ライブラリと連携したテキスト抽出処理■デ変研 MFX ライブラリと連携したメールや圧縮ファイル展開

検索したいドキュメントが、MS-Office / PDF / 一太郎などのファイル検索したいドキュメントが、メールに添付された文書ファイルであったり、圧縮ファイルに内包されたフォーマットファイルであっフォーマットであった場合、デ変研 TF ライブラリと連携し、対象フォーマットを解析して、テキスト情報を取出し、そのテキスト情報をインデッた場合には、デ変研MFXライブラリと連携し、対象ファイルを解析クスに登録することができ、高速検索処理を実現しています。

して、さらに、添付ファイルや圧縮ファイルの展開を行って、フォー以下のファイルフォーマットに対応しています。

マットファイルを取出し、さらに、デ変研 TF ライブラリと連携する※詳しくは「デ変研TFライブラリ」をご参照ください。

ことで、テキスト情報を取出し、そのテキスト情報をインデックスに■対応文書や圧縮ファイルに対応しています。

登録することができ、高速検索処理を実現しています。以下のメール※詳しくは「デ変研MFXライブラリ」をご参照ください。

Microsoft Word
97 / 98 / 2000 / 2002(XP) / 2003 / 2007 / 2010 /2013 / 2016 / 2019 / 2021

■対応メール形式

Microsoft Excel
97 / 2000 / 2002(XP) / 2003 / 2007 / 2010 / 2013 /2016 / 2019 / 2021

１つのメール展開 EML / Outlook の MSG 形式（EML は、E-Mail 形式のことで、Microsoft PowerPoint
97 / 2000 / 2002(XP) / 2003 / 2007 / 2010 / 2013 /2016 / 2019 / 2021

Microsoft Visio

RFC822 に準拠したものをいいます）
圧縮ファイル zip (winzip / pkzip : 圧縮形式 / 自己解凍形式 )lha (lh1 / lh5 / lh6 / lh7 : 圧縮形式 / 自己解凍形式 )tar＋gzip / tgz / gziprar ( 圧縮形式 / 自己解凍形式 )tar＋bz2 / tbz2 / bzip2
7z ( 圧縮形式 / 自己解凍形式 )2002(XP) / 2003 / 2007 / 2010 / 2013 / 2016 / 2019 / 2021

Microsoft Word for Mac
98 / 2001 / 2004 / 2008 / 2011 / 2016 / 2019 / 2021

Microsoft Excel for Mac
98 / 2001 / 2004 / 2008 / 2011 / 2016 / 2019 / 2021

※それぞれの圧縮形式において、Microsoft PowerPoint for Mac

パスワード付きのものを除きます。

98 / 2001 / 2004 / 2008 / 2011 / 2016 / 2019 / 2021

Microsoft 365
年 2 回動作確認

Microsoft XPS 1.0
JustSystems 一太郎

アーカイブ形式 tar / gnutar

Ver.5-Ver13 / 2004 - 2021

■対応 OS

Adobe Systems Acrobat

Red Hat Linux

4.0 / 5.0 / 6.0 / 7.0 / 8.0 / 9.0 / X / XI / DC

PDF 1.2 / 1.3 / 1.4 / 1.5 / 1.6 / 1.7
RTF 1.0 -1.9
テキスト文書JIS (ISO-2022-JP) / EUC-JP / Shift_JIS / UTF-8 / UTF-16
マークアップ言語

HTML / XML / SGML

ODF(Writer / Calc / Impress) 1.1 / 1.2
OpenOffice 3.0 / 3.1 / 3.2 / 3.3
LibreOffice 3.4※詳細は、マニュアルをご参照ください。

AS3 / ES3 / WS3 /AS4 / ES4 / WS4 / EL5 / EL6 / EL7 / EL8■構成
メモリ
HDD 利用量

1GB 以上500MB 以上

※Linux は、32bit 版と 64bit 版の両方を対応に含めます。
※他の OS・コンパイラ・開発環境下でご不明な点は、お問い合わせください。
※ハードウェアの搭載メモリは推奨 2GB 以上で、メモリ量が多い方が大きな文書に対応できます。

品質マネジメントシステム ISO 9001:2015 の認証取得

株式会社 データ変換研究所 Dehenken Limited
本社 〒600-8433 京都市下京区高辻通室町西入繁昌町 300 -1 カノン室町四条 308

株式会社データ変換研究所は、2011 年 9 月 27 日付
けで全社統一の品質マネジメントシステムとしてDNV より ISO-9001:2008 の認証を取得しました。
( 現在は 2015 年版に移行 )TEL 075 - 366 - 4645 FAX 075 - 366 - 4649
横浜営業所 〒231-0048 神奈川県横浜市中区蓬莱町 2 - 4 - 7 澤田聖徳ビル 204

URL : http://www.dehenken.co.jp/ E-Mail : info_ml@dehenken.co.jp
EST D 1999 Dehenken Limited © Copyright Dehenken 2022. All rights reserved.

認証の対象は「ソフトウェアプロダクトのデザイン・開発・製造」です。

Certificate No. : 02523-2011-AQ-KOB-JAB
Initial certification date : 27 September, 2011

ＯＥＭビジネス向け全文検索エンジン

Cyclope エンジン

CYCLOPE●漏れのない検索エンジン（N-gram 方式を採用）「Cyclope エンジン」は、N-gram 方式による漏れのない全文検索を行います。
「Cyclope エンジン」で採用している方式は、日本 語 は 2-gram（UTF-16 に よ り 他 国 の 文 字 も 可）、ASCII は4-gram という形式で行っています。例として『日本語 ABcd』
は、「日本 / 本語 / 語 AB/ABcd/Bcd/cd/d」のように区切り、これらをインデックスとします。

●すべての対象文書を検索します「Cyclope エンジン」は、ヒットした対象文書リストの全数を漏れなく列挙します。一般に検索エンジンは、高速化のためにいわゆる「足きり」をし、結果を速く出力します。本エンジンは、一致する全数を最後まで絞り出し、ヒットした対象文書を総て取り出します。また、検索時に限界個数（例えば 1000 件）を設定した場合には、指定された数までで打ち切ることもできます。

●管理できる対象文書は無制限●ゆらぎによる漏れの吸収●クラスタリング検索コマンド

1 つのインデックスで管理できる文書数は約 10 億です（30bitでの範囲。または OS のシステムによる制限まで可）。1 つのイン

アルファベットの大小文字の同一視や、全半角文字の同一視の複数のインデックスを同時に検索できるクラスタリング検索コ
マンドを用意しています。クラスタリング機能により、大量の文デックスファイルの内部は、複数のデータブロックに分かれて設定が可能です。これにより、「ABC」という検索キーワードで、「ABC」「abc」のいずれでも漏らさず検索できます。ゆらぎの設書によるインデックス検索時間を複数のマシンに分散させて、検定情報は、UTF-8 の文字コードにて定義できます（EUC-JP も索が完了するまでの時間を大幅に短縮させることができます。ま可）。

た、クラスタリング検索コマンドには、監視機能も用意していまいます。データブロックは、インデックス作成時に 1000 ファイル、あるいは、指定されたメモリ量のいずれかに達したときに書き込みが行われます。1 つのデータブロックの最大は 4GB で、複数の連結ができます。

●複数のインデックスを横断して検索できます
検索時には複数のインデックスファイルを横断して（串刺しして）行うことができます。システムのデザインとしては、日ごとのデータに対して 1 つのインデックスを作成するという日ごとインデックス型のものにすると、期間指定による横断検索が容易に実装できます。また、対象データのバックアップ時に、対象データとともに検索インデックスを含めることにより、リカバリ時に検索インデックスも回復させる仕組みにすることもできます。

すので、分散環境におけるプロセスの動作状況を把握できます。

●検索条件の指定と部分的条件付検索
検索時には and、or、not、( ) の条件を指定することができます。

●提供コマンド例

また、カスタマイズによりますが、部分的条件付検索をデザイン「MailCyclope」を例に、「Cyclope エンジン」を用いたコマンドすることができます。部分的条件付検索とは、一部の情報だけを例についてご紹介します。多様なニーズやサポート側の立場にインデックスに別フィールドとして登録し、その部分に特化し立ったコマンドをご提供しています。コマンド例とそのコマンた検索を実装することをいいます。部分的条件付検索は、日付、ドに含まれるライブラリを示します。

件数、場所 ( 位置 ) 指定です。メールの全文検索「MailCyclope」

TF 含む

MFX 含むインデックス作成コマンド○○

mc_search

検索コマンド○○※部分的条件付検索の実装は、カスタマイズ案件となります。
別途、お問い合わせください。

cmc_search

クラスタリング検索コマンド○−●ログによる処理の監視情報の提供

cmc_daemon

cmc_search 用の常駐デーモン○○

本検索エンジンの利用者が処理の状況を把握するために、ログ

merge_index

インデックスのマージコマンド−−

情報を出力させて、動作状況を追跡しやすくしています。イン

dump_index

インデックスのダンプコマンド−−を例に挙げると、Subject / From / To 等のヘッダの一部や、本コマンド名文、添付情報、添付ファイル名等が、部分的条件付検索によってmc_index実現しています。

デックス生成時に、異常データによりプログラムが予期せぬ中処理内容断をするときや、大量データに遭遇して処理がタイムアウトす●多くのソフトウェアベンダが採用るというような想定外の事態発生時の対応を考え、プログラム大手電機メーカ系のソフトウェア企業様や、新進気鋭のソフトを監視型にしています。その監視プロセスのログ情報により、エウェアベンチャー企業様に採用されています。使用対象はアプ

ラーの発生したデータを特定し、調査を迅速リケーション組込型エンジン、電子メールフィルタリング、本文に行えるようにしています（以上の説明は添付・ファイルの全文検索機能、通信パケット記録装置のフォ「MailCyclope」を対象にしています）。

レンジックシステム等です。

Cyclope●MailCyclope
メールの全文検索のためのアプリケーションです。2005 年個人情報保護法が運用されて以降、日々送受信されるメールを蓄積し、証拠保全するシステムが利用されています。MailCyclope は、その大量蓄積メールの中から特定キーワードを含組み込み利用の全文検索エンジン

Cyclope エンジン
「Cyclope エンジン」は、ソフトウェアにオリジナルの全文検索の機能を備えたいソフトウェア・メーカー様、クラウドサービスベンダ様のための、OEM 向けに組み込んで利用する全文検索エンジンです。全文検索の機能を搭載した強力なアプリケーションの実現をご支援します。

んだメールを、高速に検索するために使用されています。デ変研 TF ライブラリとデ変研 MFX ライブラリを組み合わせ、添付ファイルの中の圧縮ファイルの中のPDF ファイルの中のキーワードまで検索対象にできます。

●HTTP Cyclope
HTTP プロトコルの蓄積されたストリームデータを、GET したもの、PUT したもの、POST したものに分類し、全文検索することができます。

●FTP Cyclope
FTP プロトコルの蓄積されたストリームデータを、全文検索することができます。

●Book Cyclope (XML Cyclope)
XML 形式で記述されたテキスト情報を、全文検索することができます。書籍デー
タを対象としているので Book Cyclope としています。

●Log Cyclope
Log を全文検索するコマンド群です。Log データは、文書データと比較するとインデックスが拡大しやすい傾向のデータです。そこで Log データを複数行にわたってチャンキング（Chunking ：処理をまとめる）してインデックスデータ量を圧縮し、検索コマンドではさらに Chunked
Scope の実データをパターン一致確認（UNIX の GREP コマンドの動作イメージ）して、検索ノイズをなくしています。

●OfficeCyclope
社内文書をサーバに格納して全文検索するシステムです。GUI は PHP を使用して実現しています。オフィス利用を前提として Dehenken より販売しています。