IBM Cloud Pak for Data as a Service ハンズオン資料 3.分析編-A：ダッシュボードで新型コロナの新規陽性者変遷を見る/2023年3月更新

# Cloud Pak for Data as a Serviceハンズオンメニュー一覧
- [0.目次](https://qiita.com/Shumpei_Kubo/items/993e0fabfaebf56fe547)
- [1.構築編](https://qiita.com/Shumpei_Kubo/items/c228b70bd33a8fce9c8f)
- [2.設定編](https://qiita.com/Shumpei_Kubo/items/6793b6759c761301b687)
- [3.分析編](https://qiita.com/Shumpei_Kubo/items/78274f839205e703a8a6)
- [3.分析編-A ダッシュボードで新型コロナの新規陽性者変遷を見る(当記事)](https://qiita.com/Shumpei_Kubo/items/76144e3bf1898b7a48de)
- [4.ETL編](https://qiita.com/Shumpei_Kubo/items/aad5aa18731224d3dfcb)
- [5.データ仮想化編](https://qiita.com/Shumpei_Kubo/items/a8e2418b171d60793cc6)
- [a.Db2へのデータロード編](https://qiita.com/Shumpei_Kubo/items/c9b51fbbe1b470e9c4ad)
- [99.動画編](https://qiita.com/Shumpei_Kubo/items/8dc1e55f62ddee859c30)

# 新型コロナウイルスの新規陽性者数のデータソース
このページにてグラフ化したいデータソースは、[厚生労働省のオープンデータ](https://www.mhlw.go.jp/stf/covid-19/open-data.html)に掲載されている[こちらのデータソース](https://covid19.mhlw.go.jp/public/opendata/newly_confirmed_cases_daily.csv)です。
![スクリーンショット 2021-10-04 17.26.24.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/3cabfda3-99af-1dbf-f7a4-ffa5df7c90d3.png)

# 前提事項
- 同じIDですべての操作を行いますが、
    - 前半はデータ整備人の立場での操作です。
    - 後半はデータ利用者としての操作です。
- 今回は２０２１年１０月４日時点のデータを使用しています。

# 1.データカタログ画面上での操作
## 1.1.データソースをデータカタログに追加（データ整備人として）

- まず最初にデータ整備人の立場として、外部データへの接続情報をカタログに登録しておきます。（データ利用者に幅広く利用してもらえるように）

- 「カタログに追加」から「接続」を選択
![スクリーンショット 2021-10-04 17.30.43.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/8578610d-ee98-e67a-d301-fc5a829437d5.png)

---

- 「接続の追加」から「HTTP」を選んで「選択」ボタンをクリック。
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/4d1e8aa5-500d-9842-c706-ed834fd1b025.png)

---

- 名前や説明を入力して、URL欄に[先程のCSVのURL](https://covid19.mhlw.go.jp/public/opendata/newly_confirmed_cases_daily.csv)を入力。
- 念の為、接続されているかを確認するために、「接続のテスト」をクリック。
![スクリーンショット 2021-10-04 17.37.51.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/c68d5101-22ec-b06c-7273-9dc53647ae8d.png)

---

- テスト正常終了を確認し、「作成」をクリック。
![スクリーンショット 2021-10-04 17.38.45.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/433b8a30-7b72-bf92-d5ea-9b857f854bba.png)

## 1.2.データ接続情報をプロジェクトに追加する。（データ利用者として）

- 次に、データ利用者の立場として、カタログ上で見つけたデータ接続情報を個別のプロジェクトにコピーします。
- カタログ上でデータ接続情報をクリック。
![スクリーンショット 2021-10-04 17.45.48.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/5b1837d3-88ba-b2bc-c0ec-c78fc5392ea7.png)

---

- プロジェクトに追加、をクリック。
![スクリーンショット 2023-03-06 9.42.06.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/198892ee-7fff-f692-a326-c4b08919193a.png)


---

- 移動先のプロジェクトを選択し、「追加」をクリック。
![スクリーンショット 2021-10-04 17.52.24.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/33dc22e1-794c-2891-f24a-01baefd1c32b.png)

---

- 移動された旨のメッセージが出るので、「プロジェクトに移動」をクリック。（当該メッセージが消えてしまったら、手動で当該プロジェクトまで移動してみてください。）
![スクリーンショット 2021-10-04 17.53.07.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/1fcc02c7-81f4-a763-ea6b-b0ee2431fd89.png)


# 2.プロジェクト画面上での操作（データ利用者として）

## 2.1.プロジェクトへのデータ資産の追加

- プロジェクト上に追加された接続情報を利用して、その先にあるデータ資産をプロジェクトに追加します。

- プロジェクトで接続情報がある事を確認し、「資産のインポート」をクリックします。
![スクリーンショット 2023-03-06 9.47.12.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/e7ce6c0b-3676-28c3-86f6-ed2ff9808872.png)

---

- 「接続データ」を選択し、対象となる接続情報（今回はCOVID新規陽性者推移）をクリック。
- その先の対象データ（今回はnewly_confirmed_cases_daily.csv）にチェックを入れ、
- 画面右下の「インポート」ボタンが青くなったらクリックします。

![スクリーンショット 2023-03-06 9.52.18.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/40704398-bf3b-47ed-b9b2-0ca22c4fa695.png)


---

- プロジェクトにデータ資産が登録されました。データ資産をクリックします。
![スクリーンショット 2023-03-06 9.54.45.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/7d72550c-bd81-edf9-7020-c8670d006dda.png)


## 2.２.データ整形ジョブで、データの型を変更する。

### 2.２.1. データの型を変更するオペレーション

- 過去の先人の経験から、このデータのDate列が実は文字列型なので正しく時系列にならないことがわかっているので、データの変換処理を行います。
- 画面右上の青い「Preapare Data」ボタンをクリックします。
![スクリーンショット 2023-03-06 9.56.13.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/86348d64-dc68-e2d6-b1fb-f02d3d0a4c2b.png)


---

- データ整形（Data Refinery）処理が起動するまで数十秒お待ち下さい。起動し終わったら、画面左側の「1.列タイプの変換」ボタンの端にある「・・・」をクリックして表示された「編集」をクリックします。
![スクリーンショット 2023-03-06 10.46.42.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/4d147ea4-2faf-a18d-4187-863ae8e4cc2f.png)

---

- 編集画面が表示されます。「さらに表示」をクリックします。
![スクリーンショット 2023-03-06 11.15.21.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/0d901466-2e2c-8339-df2c-6bf4f23b65fe.png)

---

- 各列のデータ型が、StringからIntegerに変換されるように既に設定されていました。
![スクリーンショット 2023-03-06 11.15.38.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/235ef619-c065-f2a5-a8a5-54ba0bf6dce0.png)

---

- 今回は、「Date」列に関して、String型からDate型に変換したいのですが、その設定はされていないので、画面左下の青い「列の選択（＋）」ボタンをクリックして、Date列の型の変換を行います。
![スクリーンショット 2023-03-06 11.18.49.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/22983f1d-e882-7e0c-3f80-56ebdd4b7a35.png)

---

- Date列について、現状String型になっていることがわかります。「String」と表示されているドロップダウンリストをクリックします。
![スクリーンショット 2023-03-06 11.20.37.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/fa576eff-26e0-ebef-5f59-a9a02d5664e2.png)

- 「Date」を選択します。
![スクリーンショット 2023-03-06 11.21.48.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/25f48c4d-7f44-905e-786b-f184a833a46e.png)
![スクリーンショット 2023-03-06 11.22.36.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/61b76aec-e678-612a-5b59-434a9c407ec2.png)

- 年月日の順序として、「ymd」を選択します。
![スクリーンショット 2023-03-06 11.24.07.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/123b49a8-a39d-8cd5-5c0d-ad63ac190aa1.png)
![スクリーンショット 2023-03-06 11.24.33.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/10834683-83f0-66fd-00f0-6b6dce630860.png)

- この状態で、画面左下の青い「適用」ボタンをクリックします。
![スクリーンショット 2023-03-06 11.26.32.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/2ecf03b5-1195-6902-4892-6c54a5e29caa.png)

---

- Date列がDate型に変わっている事がわかります。
- また、その他の列もInteger型に変わっている事がわかります。
![スクリーンショット 2023-03-06 11.28.24.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/e893c0e5-bdbf-51ed-f8fb-1845911b1725.png)

### 2.2.2. データフロー設定を変更（今回は確認）するオペレーション

- 画面右上の歯車のアイコン（フロー設定）をクリックします。
![スクリーンショット 2023-03-06 19.33.07.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/d4ac110b-0a78-d34d-9e81-d30b5bfb7365.png)

#### 2.2.2.1. 一般　タブ
- フロー名を確認し、任意で説明を入力します。
![スクリーンショット 2023-03-06 19.35.22.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/4b554603-09ff-e0c5-9b6e-588cfef7014a.png)


#### 2.2.2.2. ソース・データ・セット　タブ

- 元となるデータソースの情報を確認します。
- データソースの右端の三点リーダーの箇所から、各種設定の変更が出来ます。![スクリーンショット 2023-03-06 19.39.17.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/bcbf3a23-7038-d3f0-c240-04aab793fb75.png)

![スクリーンショット 2023-03-06 19.40.16.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/75400a48-f825-7f36-989f-726cc53d9c9d.png)


##### サンプルの編集
- サンプルとして使用される行数を編集出来ます。デフォルトは1万行です。
- 今回は何もせず、画面下の「キャンセル」をクリックして戻ります。
![スクリーンショット 2023-03-06 19.42.06.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/9fbf143c-8304-3510-6c45-2c02e68065b9.png)


##### フォーマットの編集 
- ファイル・フォーマットがcsv、エンコードがUTF-8であることを確認します。
- また、無効データの処理、の箇所を「失敗」から「行」に変更します。
    - この場合、無効なデータがあった場合、ジョブが失敗することなく、該当データを含む行が除去されます。
- 今回は「保存」をクリックします。
![スクリーンショット 2023-03-06 19.57.50.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/c6919b04-c901-7c4c-ad95-83c5b7b10d88.png)


##### データ・ソースの置換
- ここをクリックすると、置き換える為のデータ・ソースを選択できる画面に出ますが、今回はデータ・ソースは変更しませんので、キャンセルをクリックします。
![スクリーンショット 2023-03-06 19.59.40.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/5dcb327d-30ca-d0fb-d489-f8cbcf7eaf88.png)


#### 2.2.2.3. ターゲット・データ・セット　タブ
- 処理した後のデータの設定です。デフォルトでは、ICOS（IBM CLoud Object Storage）上にcsvファイルとして保存されます。
- 設定を変えたい場合は、「ターゲットの選択」をクリックします。
![スクリーンショット 2023-03-06 20.02.16.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/824d7d08-9d6d-3008-318f-91ffbcdfdbab.png)

---

- 変更したいデータターゲットを一覧から選択出来ます。（プロジェクト内に存在している必要があります）
- ですが今回は設定は変更しない為、「キャンセル」をクリックして画面を戻ります。
![スクリーンショット 2023-03-06 20.06.42.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/4fd10d84-bfee-ec45-a1ea-458c297e8f8b.png)

---

- 「一般」「ソース・データ・セット」「ターゲット・データ・セット」の設定が完了したら、画面右下の青い「適用」ボタンをクリックします。
![スクリーンショット 2023-03-06 20.09.17.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/58d643dc-9bdb-8a46-7902-0f10a9842db1.png)



---

- データ修正内容が固まったので、画面右上の「ジョブを保存して作成」をクリックします。
![スクリーンショット 2023-03-06 20.10.50.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/9d93034f-b925-f458-d957-4cd94eb75e3f.png)



---

- データ修正を実行するジョブを作成して行きます。ジョブ名および説明を入力して「次へ」をクリックします。
![スクリーンショット 2023-03-06 20.17.58.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/d419fc37-2a90-c43f-27ae-285d8405178b.png)



---

- 「構成」については表示されたままで「次へ」をクリックします。
![スクリーンショット 2021-10-04 19.31.35.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/f607d9b2-3f0f-5567-7379-54b948a69bbb.png)

---

- スケジュールについては今回は設定せずに「次へ」をクリックします。
![スクリーンショット 2021-10-04 19.32.06.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/10d7ebe9-3e02-be28-376e-faccc66f8569.png)

---

- 「通知」については、当初はOFF状態なのですが、ジョブが終わる情報がすぐわかるので、今回はONにして「次へ」をクリックします。
![スクリーンショット 2021-10-04 19.32.30.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/5af41d01-f94e-4a1b-d24f-9a3e3febd5de.png)

---

- ジョブの内容を確認して「作成して実行」をクリックします。
![スクリーンショット 2021-10-04 19.33.47.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/a78bcf7c-320b-b075-4b07-5d807f6dc8fc.png)

---

- ジョブが作成されたのでポップアップが表示されます。「ジョブの詳細」をクリックします。
![スクリーンショット 2021-10-04 19.34.14.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/fb266147-3d3b-d426-58d3-8e976b2064b6.png)

- ジョブの一覧で、実行中のジョブが確認出来ます。
![スクリーンショット 2021-10-04 19.34.57.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/f715e2f6-3682-4c6a-b3dc-645528d4ce6b.png)

---

- そうこうしているうちにジョブが完了したようです。
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/1e5b34d1-ace9-1eb7-b549-6045db684d8d.png)

---

- ジョブをクリックすると、状態として「完了」していることがわかります。プロジェクトの「データ資産」タブへ戻ります。
![スクリーンショット 2021-10-04 19.35.58.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/47d5af24-23cc-bdbd-063d-4511658e1ba6.png)

---

- プロジェクト上で名前がすべて「?」になっているデータ資産があります。
- （ファイル名を日本語名称にしていた場合に限る）
- ファイル名として日本語は文字化けしてしまうようです。
![スクリーンショット 2021-10-04 19.36.50.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/e941e734-8afe-6f2e-9629-710239f3cd1a.png)

---

- ファイルをクリックして中身を確認します。日付の表示の仕方が変更されていることがわかります。
![スクリーンショット 2021-10-04 19.38.37.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/d2393f36-618f-eb52-3f30-c1ea4282a379.png)

---

- 画面右側のファイル名の箇所をクリックして、ファイル名を修正します。
![スクリーンショット 2021-10-04 19.40.52.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/8d0a396f-2960-11bc-0520-d5862771745a.png)

![スクリーンショット 2021-10-04 19.41.07.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/852aaf9c-77ae-f08f-0efa-9bbfeba6b93b.png)

---

![スクリーンショット 2021-10-04 19.41.29.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/f625dccb-f5e5-34f5-10e0-b868204c9b39.png)

## 2.2.ダッシュボード作成

### 2.2.1.全体データのみ表示

- プロジェクトに戻ります。
- ここで、画面右上の「新規資産」ボタンをクリックします。
![スクリーンショット 2023-03-07 0.58.45.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/d2fa5d36-c88c-9e47-079c-7dc40c63eb9c.png)

---
- 画面左側の「グラフィカルビルダー」を選択して、「ダッシュボード・エディター」をクリックします。
![スクリーンショット 2023-03-07 1.01.02.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/58839f9f-4b34-526b-f55f-9e6a17f3d3f3.png)


---

- 名前と説明を入力します。
- 「構成の定義」において、IBMloud上で現状稼働しているCognos Dashboard Embedded を選択します。（未設定の場合は新規サービスを構成してください。）
- 「作成」をクリックします。
![スクリーンショット 2023-03-07 1.05.50.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/7207f98b-24e5-e0ea-373e-e4d7c65db759.png)


---

- テンプレートを選択します。ここでは最もシンプルなものを選択して、「OK」をクリックします。
![スクリーンショット 2021-10-04 19.53.31.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/2af77a87-487b-20f4-a46b-570baf1af3c8.png)

---

- データソースを選択するために画面左上の「＋」ボタンをクリックします。
![スクリーンショット 2021-10-04 19.53.46.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/9195143f-5bee-d3c6-216b-a8a9aa9fb9dc.png)

---

- データ資産をクリックし、先程修正したデータ資産を選択して「選択」ボタンをクリックします。
![スクリーンショット 2023-03-07 1.08.33.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/5b52268d-9cad-83de-4b55-078938f96282.png)


---

- 選択されたデータソース名をクリックします。
![スクリーンショット 2023-03-07 1.10.26.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/e2db56b4-8120-5fb8-f7e6-48086b235659.png)


---

- データの列名が表示されます。画面左上のグラフのアイコンをクリックします。
![スクリーンショット 2023-03-07 1.11.38.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/f5fcb03e-e374-3636-89c1-c263595f030c.png)


---

- 複数表示されるグラフのうちから、「折れ線グラフ」を選択します。
![スクリーンショット 2021-10-04 19.56.47.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/56a0f6c1-04b7-f368-0a8a-26132ebf5ab2.png)

---

- グラフのベースとなるものが表示されます。
![スクリーンショット 2021-10-04 19.57.31.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/daaed167-c62e-df3a-4cde-5bf1cab4bccb.png)

---

- 「Date」を「X軸」の箇所にドラッグ＆ドロップします。
- 「ALL」を「y軸」の箇所にドラッグ＆ドロップします。
![スクリーンショット 2023-03-07 1.14.43.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/dbdcd6b5-2529-3c1d-a869-db5d2655b73e.png)


---

- 時系列グラフが表示されます。
![スクリーンショット 2023-03-07 1.15.40.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/6967bec0-0792-940e-cd6b-f1d2d99c2505.png)



---

- グラフを拡大表示します。第８波までが表示されている事がわかります。（２０２３年３月上旬時点）
- 右上の保存ボタンをクリックして、内容を保存します。
![スクリーンショット 2023-03-07 1.18.12.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/b8003696-df19-384d-32c7-c8dc91121113.png)
![スクリーンショット 2023-03-07 9.24.34.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/c8eb8881-ce0a-4f57-b547-7bea92300233.png)


### 2.2.2.都道府県別データの表示

- Y軸の欄から「ALL」を削除します。
- 「Tokyo」を「Y軸」へドラッグアンドドロップします。
![スクリーンショット 2023-03-07 1.42.14.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/550a274a-762f-e5f1-2731-663d089bc15e.png)

---

- 東京のデータが表示されます。
![スクリーンショット 2023-03-07 1.43.01.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/fcd48530-ebc9-1062-6f19-482b2bdef87e.png)

---
- グラフを拡大します。
![スクリーンショット 2023-03-07 1.43.46.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/7b5690fa-0be3-f796-b3c4-27ca12fb8c2f.png)

---
追加で、「Osaka」と「Okinawa」を、Y軸の「Tokyo」の下あたりにドラッグ＆ドロップします。

- ３都道府のグラフが表示されました。
![スクリーンショット 2023-03-07 1.48.07.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/39a38336-ea25-8354-e25a-c2ef90482bbc.png)


---

- 強調したい対象をクリックすると、ハイライトされます。
- 例えば画面上部の「Okinawa」をクリックすると、沖縄のデータのみが強調されます。
![スクリーンショット 2023-03-07 1.49.21.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/295123/71c2b2fa-50a7-ca62-68b1-cdac998460a1.png)