Metadata Enrichment をCloudPakforData as a Service で試してみた。

# 概要
[こちらの記事](https://qiita.com/Shumpei_Kubo/items/f21cdf5cd1b6a3371ea3)で記載した、メタデータインポートの後処理であるメタデータエンリッチメントを、この記事ではご紹介します。

# 公式ドキュメント
メタデータ・エンリッチメント全般については、こちらの記事「[メタデータ・エンリッチの管理](https://dataplatform.cloud.ibm.com/docs/content/wsj/governance/metadata-enrichment.html?context=wdp&audience=wdp)」を参照してください。

# 手順
## エンリッチメント作成
プロジェクト画面の右上の「新規資産」をクリックします。
![スクリーンショット 2023-06-25 0.17.58.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/474844a7-1c8f-2584-68f0-6931f0479b8f.png)


画面左の「自動化ビルダー」をクリックし、「メタデータのエンリッチメント」をクリックします。
![スクリーンショット 2023-06-25 0.18.33.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/b9caa18f-1607-274e-a368-b565f7ef9af3.png)


エンリッチメントに名前をつけ、必要であればタグを入力し、画面右下の「次へ」をクリックします。
![スクリーンショット 2023-06-25 0.19.57.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/ffc95d4b-99dd-9902-02a8-f5cda244ddaa.png)


「プロジェクトからデータを選択」をクリックします。
![スクリーンショット 2023-06-25 0.20.32.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/83da06c1-bb0b-14f6-cc15-c1d63f897698.png)

「Metadata import」をクリックし、先程実施したメタデータインポート（ここではMDI）のチェックボックスをクリックし、
「選択」をクリックします。
![スクリーンショット 2023-06-25 0.21.51.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/f65c9cfa-17ef-b8a3-854a-ce6fa996fbe0.png)

画面右下の「次へ」をクリックします。
![スクリーンショット 2023-06-25 0.22.18.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/db7e3ade-384f-52a9-491e-26a8483e7d81.png)

エンリッチ対象として「プロファイル・データ」「品質の分析」「用語の割り当て」を選択し、「カテゴリーの選択」をクリックします。
![スクリーンショット 2023-06-25 0.23.21.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/85481da8-3cb8-d6b1-0844-45856fe95cc3.png)

自分で作成済のカテゴリーを一つ以上選択します。（ここでは「SK」を一つ選択）
![スクリーンショット 2023-06-25 0.24.40.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/e3ca5262-81b5-1659-4f99-3702e90457e3.png)

サンプリングのレベルを選びます。ここでは基本的な「基本」が選択された状態ですので、そのまま画面右下の「次へ」をクリックします。
![スクリーンショット 2023-06-25 0.25.31.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/a76d2a50-728d-b482-2729-0e48a33b8284.png)


ジョブのスケジュール作成画面になります。ここではそのまま実行しますので、そのまま画面右下の「次へ」をクリックします。
![スクリーンショット 2023-06-25 0.47.17.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/7143bca8-67c3-e03b-70c2-ea6a553d7a1f.png)

設定した内容を確認して画面右下の「作成」をクリックします。
![スクリーンショット 2023-06-25 0.47.56.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/619dbdfd-ba8b-a191-404e-052c8df95fa8.png)

## エンリッチメント実施中

![スクリーンショット 2023-06-25 0.48.33.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/124942c8-7c7c-9096-c909-e4308b1ae5cc.png)


![スクリーンショット 2023-06-25 0.48.52.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/22d40209-b392-5351-a361-019628c7a4b7.png)


プロジェクトの「ジョブ」タブを見ると、先程作成したジョブが実施中であることがわかります。
![スクリーンショット 2023-06-25 0.49.54.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/3c78aed1-96f0-3476-460b-8a279bdfd3fa.png)


ジョブ実行中。
![スクリーンショット 2023-06-25 0.50.11.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/6eaee52a-17ea-355a-a2a3-250040f2e2ea.png)


ジョブが完了しました。
![スクリーンショット 2023-06-25 13.44.10.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/d3a827bf-6ed5-f8f1-7209-894a8b8555e1.png)

ジョブ完了後のログは以下の通りでした。
![スクリーンショット 2023-06-25 13.46.01.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/011725e0-85dd-466e-13fd-dc3df6bf41e5.png)



## 結果確認

### ビジネス用語

CUSTOMERテーブルに、「CUSTOMER」というビジネス用語が紐づいている事がわかります。
![スクリーンショット 2023-06-25 13.50.03.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/2a94f518-4052-90d8-27ea-93ecd7519ac9.png)

CUSTOMER_ADDRESSテーブルについては、「CUSTOMER」という用語が提案されています。「割り当て」をクリックしてみましょう。
![スクリーンショット 2023-06-25 13.51.22.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/c6e98019-8124-0398-9b1c-619280f1c970.png)

用語として割り当てられました。
![スクリーンショット 2023-06-25 15.45.29.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/d8d9e3cd-e2c6-312a-2539-6da6c3a0379e.png)

### データ品質

データ品質について確認してみましょう。
「CUSTOMER_ADDRESS」の品質が97%というので、その内容を確認してみます。
![スクリーンショット 2023-06-25 15.47.39.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/11e765f7-8607-7d99-16a6-5e1763b189e4.png)


品質の評価が表示されました。
![スクリーンショット 2023-06-25 15.48.24.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/ddc9e760-5d31-4083-ceb5-ce81a01d0994.png)

各種評価基準については、以下を参照にしてみてください。
[データ品質違反 (Data quality violations)](https://dataplatform.cloud.ibm.com/docs/content/wsj/governance/quality_violations.html?context=wdp&audience=wdp)