QRadarの色々な検索方法

# QRadarのログ検索について
1. QRadar はログをログソースという単位でまとめてシステム内に取り込みます
1. ログソースを削除すると取り込んでいたログも一緒に削除されます
1. QRadarはLinuxOSで動いていますが、基本的にLinux CLIからのログ検索はできません
1. QRadarで収集したログはAriel Databaseの中に保存され、Linux CLIからクエリをかけられますが見にくい

# 最初の検索画面表示
ログ検索するためには、WebUIから[Log Activity]をクリックする
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/83b29aa4-e897-127e-9a04-459cf7f01c90.png)
取り込んでいるログがリアルタイムで表示される
中身の詳細を見るためには右上のポーズボタンを教えて止める必要がある
ポーズしたら、見たいログをダブルクリックで開く
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/3709d328-eb58-f68c-b335-2211f4737d22.png)

# ログソースを指定した検索
[Add Filter]をクリックする
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/169a4f0d-8523-9fde-e0e9-3a4601f567d1.png)
Parameterにて[Log Source[Indexed]]を選び対象のログソースを選び検索を実行する
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/8d63e24e-e72a-fa39-dd44-a3b961b7fe54.png)
Log Source Filterにて任意の文字列を入れて、閲覧したいログソースを検索して指定し[Add Filter]ボタンをクリックする
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/271cc31a-ed93-23fc-6e45-c1bb11eea77d.png)

以下のような画面に遷移する。
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/6f6caeca-44b6-42e9-aa7f-7306ce560733.png)
もし何も表示されないようなViewの[Select An option]をクリックして時間帯を変更する
例：Last 5 Minutes = 現在時刻から過去５分間のログを表示

<img width="200" alt="ファイル名" src="https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/e93fd6c4-2b26-f5d1-576b-e50967b4bd9f.png">


# 色々な条件をつけて検索を行う
[Search]をクリックする
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/a174cd64-a772-c3c5-d6fe-88108dc6276d.png)
[Edit Search]をクリックする
<img width="200" alt="ファイル名" src="https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/edc891d8-30c9-c3b3-d349-e27ba471130a.png">
以下の画面に遷移する。この画面全体を使って検索条件を組み立てる
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/c3e90acc-86c7-96ea-5f71-1516472576d1.png)
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/32b97f87-c278-837c-cde7-881d45e2d844.png)
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/93030bad-c166-8300-159f-bb8c45048b5b.png)
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/273ea2d6-0599-54c0-9e7b-d163f61b8fc8.png)
## 送信元IP、送信先IPを指定した検索
Search Parametersにて[Source IP[Indexed]]を選び[Value]に任意のIPアドレスを記入する
Add Filterを押す
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/7f1364b1-d5d9-87b9-eb1a-d7b8e895fe01.png)
Search Parametersにて[Destination IP[Indexed]]を選び[Value]に任意のIPアドレスを記入する
Add Filterを押す
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/f920a294-3c45-5ef3-23de-3a43c9e65e9f.png)
Search Parametersは以下のようになる。複数条件を[Add Filter]で登録が可能で、And条件となる。
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/52b1a571-c2a4-969a-42d3-3d988b56cc37.png)


## 時間を指定した検索
上段のTime Rangeからログ検索対象範囲である時間設定を行う
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/edc2ae2d-4902-c19e-69b0-ad76e467aa1a.png)

# フィールドの順序
Log Activityの画面で表示される列の名前（カラム）の順序を変更することができる
長いログによっては不要なカラムを後ろにもってきて重要なカラムを前にもってきて見えるようにするといった用途がある
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/95fd1415-b739-32f9-bcda-ed1734bf2aad.png)
Column DefinitionにてColumnsの順序変更（↑と↓を使って順序を変更）及び、非表示のカラムを追加・削除（Available Columnsが全カラム情報で>及び<を使って変更）が可能
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/6613169c-430e-0bb5-652e-e77765b74bda.png)

## 検索の実行
ページ一番下の右[Search]ボタンを押して検索を実行する
# 特定の文字列があるログのみを検索
Search ParametersのParameterにて[Payload Contains]を選びValueを任意の文字列にして[Add Filter]をクリックする
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/40123df3-441d-483f-2fd7-943f5752885c.png)

# イベントIDをキーにした検索（グラフ表示）
ID等特定の情報でログをまとめて割合を表示することができる
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/77a1001e-63c7-301f-b9a6-0a89ac5efcd3.png)

IDで出現割合をグラフで表示してくれる
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/21d41993-cabe-13dd-65e7-d98c8c2356fe.png)

# AQL
AQLについて　https://www.ibm.com/docs/ja/qsip/7.4?topic=aql-query-structure
SQLの構文のような形でQueryを投げることができる

例：過去2日において、特定のログソースから通信元IPと通信先IPとユーザ名だけを10件抽出
``` SELECT sourceip, destinationip, username FROM events WHERE LOGSOURCENAME(logsourceid) = '{ログソース名}' GROUP by sourceip, destinationip ORDER BY sourceip DESC LIMIT 10  LAST 2 DAYS ```
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/abf23ede-7048-612b-f7ec-a116947258ed.png)


参考URL：https://www.ibm.com/support/pages/qradar-%E3%83%AD%E3%82%B0%E3%83%BB%E3%82%BD%E3%83%BC%E3%82%B9%E3%81%94%E3%81%A8%E3%81%AEeps%E3%83%AC%E3%83%BC%E3%83%88%E3%82%92%E7%A2%BA%E8%AA%8D%E3%81%99%E3%82%8B%E6%96%B9%E6%B3%9

例：ログソース毎のEPSを表示する（過去5分）
``` SELECT LOGSOURCENAME(logsourceid) AS "Log Source", SUM(eventcount) AS "Number of Events in Interval", SUM(eventcount) / 300 AS "EPS in Interval" FROM events GROUP BY "Log Source" ORDER BY "EPS in Interval" DESC LAST 5 MINUTES ```
例：ログソース毎のEPSを表示する（期間指定）
``` SELECT LOGSOURCENAME(logsourceid) AS "Log Source", SUM(eventcount) AS "Number of Events in Interval", SUM(eventcount) / 300 AS "EPS in Interval" FROM events GROUP BY "Log Source" ORDER BY "EPS in Interval" START '2023-10-01 00:00' STOP '2023-10-01 00:05'  ```

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/cf94f3bd-e398-55af-9498-2ed6911b1050.png)

# APIにてイベント検索
## 準備
APIキーの取得 https://qiita.com/tak_morita39/items/e7d68014a2d422bfd61f を行って以下のSEC:xxxで利用する

以下は、過去2日間において特定のログソースから来たログを抽出する。
ただしログのフィールドは、sourceip,destinationip,Username

## ログ検索
```
curl --location --request POST 'https://{QRadarのコンソールIPアドレス}/api/ariel/searches?query_expression=SELECT sourceip,destinationip,username FROM events WHERE LOGSOURCENAME(logsourceid)='{ログソース名}' GROUP BY sourceip,destinationip ORDER BY sourceip DESC LIMIT 10 LAST 2 DAYS
--header 'SEC: 1f640b85-690e-483b-9d2e-033b8eaef542' 
--header 'Accept: application/json' 
--header 'Cookie: JSESSIONID=6FD003B60D29D74B5BCD342BCD03A318'
```
```
{
    "cursor_id": "7c5a00b5-5aab-41b3-b472-df98aa2852cf",
    "status": "WAIT",
    "compressed_data_file_count": 0,
    "compressed_data_total_size": 0,
    "data_file_count": 0,
    "data_total_size": 0,
    "index_file_count": 0,
    "index_total_size": 0,
    "processed_record_count": 0,
    "desired_retention_time_msec": 86400000,
    "progress": 0,
    "progress_details": [],
    "query_execution_time": 0,
    "query_string": "SELECT sourceip, destinationip, username FROM events WHERE LOGSOURCENAME(logsourceid)='FortiGate @ 192.168.49.15a7a4bfb5-5c57-42b1-81af-801695091793' GROUP by sourceip, destinationip ORDER BY sourceip DESC LIMIT 10 LAST 2 DAYS",
    "record_count": 0,
    "size_on_disk": 0,
    "save_results": false,
    "completed": false,
    "subsearch_ids": [],
    "snapshot": null,
    "search_id": "7c5a00b5-5aab-41b3-b472-df98aa2852cf"
}
```

## 結果の抽出
ログ検索で取得したsearch_idを使って結果を取得する
```
curl --location --request GET 'https://{QRadarのコンソールIPアドレス}/api/ariel/searches/7c5a00b5-5aab-41b3-b472-df98aa2852cf/results' \
--header 'SEC: 1f640b85-690e-483b-9d2e-033b8eaef542' \
--header 'Accept: application/json' \
--header 'Cookie: JSESSIONID=FB4BCA54D5B168F5BD83EAC2287AFA55'
```
```
{
    "events": [
        {
            "sourceip": "127.0.0.1",
            "destinationip": "127.0.0.1",
            "FIRST_username": null
        },
        {
            "sourceip": "127.0.0.1",
            "destinationip": "192.168.49.15",
            "FIRST_username": null
        },
        {
            "sourceip": "127.0.0.1",
            "destinationip": "63.137.229.3",
            "FIRST_username": null
        },
        {
            "sourceip": "127.0.0.1",
            "destinationip": "12.34.97.18",
            "FIRST_username": null
        },
        {
            "sourceip": "192.168.211.60",
            "destinationip": "192.168.49.15",
            "FIRST_username": null
        },
        {
            "sourceip": "192.168.68.191",
            "destinationip": "192.168.49.15",
            "FIRST_username": null
        },
        {
            "sourceip": "192.168.49.115",
            "destinationip": "192.168.49.15",
            "FIRST_username": null
        },
        {
            "sourceip": "192.168.49.115",
            "destinationip": "192.168.97.18",
            "FIRST_username": null
        },
        {
            "sourceip": "192.168.49.115",
            "destinationip": "192.168.49.255",
            "FIRST_username": null
        },
        {
            "sourceip": "192.168.49.114",
            "destinationip": "192.168.49.255",
            "FIRST_username": null
        }
    ]
}
```
## QRadar APIツール

https://{QRadarコンソールのIPアドレス}/api_doc
APIキーを発行せずとも結果確認が可能
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/3307206/0c4825d2-e549-b91c-5997-dfd0f9dcc48f.png)

https://www.ibm.com/support/pages/qradar-overview-making-queries-qradar-api