俺様サーバー構築記 - ZFS の上に Arch Linux をインストール; やり直し(Linux-LTS)@ノートパソコン(BIOS)

「[俺様サーバー構築記 - 基本方針](https://qiita.com/katz_engineer/items/dbabcff4e14e9db2b10f)」に基づく作業の続き。[以前](https://qiita.com/katz_engineer/items/9d177766baf95c1e2674)インストールした[ノートパソコン1台目](https://qiita.com/katz_engineer/items/9d177766baf95c1e2674#%E5%89%8D%E6%9B%B8%E3%81%8D%E3%83%9E%E3%82%B7%E3%83%B3%E3%82%B9%E3%83%9A%E3%83%83%E3%82%AF)です。lenovo R500 2714-CTO

こいつに[前回のLTS版Linux + ZFS](https://qiita.com/katz_engineer/items/70e6a75581c60426c836)でインストールをやり直します。が… インストーラをLTS版にする必要は無さそうですな。LTS版カーネルによるインストーラ作成手順に意味が無い訳では無いですけど。カーネル改変でzfsが対応していない期間にインストーラを作成できない事になったら大変ですし。

参考文献1: [俺様サーバー構築記 - ZFS の上に Arch Linux をインストール@ノートパソコン(BIOS)](https://qiita.com/katz_engineer/items/9d177766baf95c1e2674)
参考文献2: [俺様サーバー構築記 - ZFSをarchisoに埋め込む(linux-lts)@VirtualBox(UEFI)](https://qiita.com/katz_engineer/items/70e6a75581c60426c836)


# 前書き：マシンスペック

再掲。

機種：lenovo R500 2714-CTO
CPU: Celeron Dual-Core T3000
クロック: 1.8GHz
メモリ: 3GB
HDD: 320GB

64ビットCPUでメモリも3GBあります。

# インストールの準備

何はともあれ、ローカルに溜め込んだファイルが無いか確認。あればどこかに保存します。完全にフォーマットからやり直して、ローカルの内容を全部吹っ飛ばすつもりなので。

それとマシン名も確認。同じ名前で作成します。マシン名も有限な資源の一つ。特に、何らかの規則で自分だけの微笑ましい名前を付けてる場合は重要…

ブートメディアは、現時点ではUSBメモリになってる筈。もし違うようならBIOS画面で設定します。

ここまでやってから、[前回のZFS関連ツールを埋め込んだarchisoを焼き付けたUSBメモリ](https://qiita.com/katz_engineer/items/70e6a75581c60426c836)をマシンに挿して電源を入れ、BIOSでブートメディアを設定。
そして起動すると、いつもの Arch Linux インストールメディアのメニューが出ます。いつも通りに選択して起動。

## キーボード

```console
# loadkeys jp106
```

## コンソールフォント

コンソールフォントはそのまま変更しません。日本語が表示されればそれなりに便利そうだけども、当面は必要無いと判断。

## 起動モードの確認

BIOSだという事はわかっていますが念の為。

```console
# ls /sys/firmware/efi/efivars
ls: cannot access '/sys/firmware/efi/efivars': No such file or directory
```

## パーティション

HDDを確認しておきます。何だか訳の分からないパーティションになってますが。

```console
# ls /dev/sd*
/dev/sda  /dev/sda1  /dev/sda9  /dev/sdb  /dev/sdb1  /dev/sdc  /dev/sdc1  /dev/sdc2
```

lsblkコマンドを使うと、多少整理されて見えます。

```console
# lsblk
NAME   MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
loop0    7:0    0   621M  1 loop /run/archiso/sfs/airootfs
sda      8:0    0 298.1G  0 disk
├─sda1   8:1    0 298.1G  0 part
├─sda9   8:9    0     8M  0 part
sdb      8:16   1   7.5G  0 disk
├─sdb1   8:17   1    16M  0 part
└─sdb2   8:18   1   7.4G  0 part
sdc      8:32   1   7.3G  0 disk
├─sdc1   8:33   1   686M  0 part /run/archiso/bootmnt
└─sdc2   8:34   1    64M  0 part
sr0     11:0    1  1024M  0 rom
```

```/dev/sdb``` とその眷属（```/dev/sdb1``` ```/dev/sdb2```）は、今まで起動用に使っていたUSBメモリですね。```/dev/sdb1``` にGRUBを入れていて、```/dev/sdb2```はFAT32でフォーマットしてある外部記憶装置扱いの部分です。

```/dev/sdc``` とその眷属（```/dev/sdc1``` ```/dev/sdc2```）が起動する時に使用したUSBメモリです。mountコマンドの結果にそれが表れます。

```console
# mount | grep /dev/sd
/dev/sdc1 on /run/archiso/bootmnt type iso9660 (ro,relatime,nojoliet,check=s,map=n,blocksize=2048)
```

```/dev/disk/by-id``` を見ると、ファイル名（＝デバイスID）からもう少し情報を得られる可能性があります。どのようなデバイスなのかによって命名されるらしいので。BIOS画面などから得たHDDの商品名などと突き合わせればハッキリするでしょう。

```console
# ls -l /dev/disk/by-id
total 0
lrwxrwxrwx 1 root root  9 Jun 20 22:24 ata-HL-DT-ST_DVDRAM_GSA-T50N_M2G9CU23115 -> ../../sr0
lrwxrwxrwx 1 root root  9 Jun 20 22:24 ata-Hitachi_HTS723232A7A364_E3834263EDYUAD -> ../../sda
lrwxrwxrwx 1 root root 10 Jun 20 22:24 ata-Hitachi_HTS723232A7A364_E3834263EDYUAD-part1 -> ../../sda1
lrwxrwxrwx 1 root root 10 Jun 20 22:24 ata-Hitachi_HTS723232A7A364_E3834263EDYUAD-part9 -> ../../sda9
lrwxrwxrwx 1 root root  9 Jun 20 22:24 usb-058f_6387_17082208002200-0:0 -> ../../sdc
lrwxrwxrwx 1 root root 10 Jun 20 22:24 usb-058f_6387_17082208002200-0:0-part1 -> ../../sdc1
lrwxrwxrwx 1 root root 10 Jun 20 22:24 usb-058f_6387_17082208002200-0:0-part2 -> ../../sdc2
lrwxrwxrwx 1 root root  9 Jun 20 22:24 usb-SanDisk__Cruzer_Fit_4C530000211203116300-0:0 -> ../../sdb
lrwxrwxrwx 1 root root 10 Jun 20 22:24 usb-SanDisk__Cruzer_Fit_4C530000211203116300-0:0-part1 -> ../../sdb1
lrwxrwxrwx 1 root root 10 Jun 20 22:24 usb-SanDisk__Cruzer_Fit_4C530000211203116300-0:0-part2 -> ../../sdb2
lrwxrwxrwx 1 root root  9 Jun 20 22:24 wwn-0x5000cca6d4e21364 -> ../../sda
lrwxrwxrwx 1 root root 10 Jun 20 22:24 wwn-0x5000cca6d4e21364-part1 -> ../../sda1
lrwxrwxrwx 1 root root 10 Jun 20 22:24 wwn-0x5000cca6d4e21364-part9 -> ../../sda9
```

最後の```wwn-```何とかいうデバイス名の正体が不明ですが、今回は関係無いので放置！

という訳で ```/dev/sda``` がHDDです。ちなみに ```/dev/sr0``` は、デバイスIDからわかる通りDVDドライブです。

デバイスを確認した所で、HDDにパーティションを切ります…が、
[1.11 性能が今ひとつなんだけど。 - ZFS on Linux FAQ](https://www.nosuz.jp/ZFSonLinux/faq_ja.html#PerformanceConsideration)という記事を発見。

> ディスク全体を使ってpoolを作成する: ディスク全体を指す名前を使ってzpool createを実行します。こうするとZFSは、正しい配置になるように自動的にパーティションを作成します。さらにwholedisk設定のおかげで他のZFS実装との相互運用性も改善されます。

ZFSに詳しい方にとっては常識なのだと思いますけども。そういう訳でパーティションを一切作りません。ブートに関しては外部メディアに頼る事にします。内蔵HDDだけでは完結しなくてちょっと悔しいですが。詳しくは後述。

HDDフォーマットの前に ```wipefs``` コマンドを実行します。

スワップ領域については [パーティショニング - ArchWiki](https://wiki.archlinux.jp/index.php/パーティショニング#.E3.82.B9.E3.83.AF.E3.83.83.E3.83.97) の [パーティションの大きさはどうすればいいですか？] に下記のような記述があります。

> 大容量のメモリ（1024MB 以上）を積んでいるときは、スワップパーティションは小さく、または作らなくてもかまわないでしょう。2GB 以上の物理 RAM を持っているなら、スワップパーティションがないほうが一般的に良いパフォーマンスを発揮すると思われます。

これを信じてスワップパーティションは作りません。

```console
# wipefs -a /dev/sda
/dev/sda: 8 bytes were erased at offset 0x00000200 (gpt): 45 46 49 20 50 41 52 54
/dev/sda: 8 bytes were erased at offset 0x4a85d55e00 (gpt): 45 46 49 20 50 41 52 54
/dev/sda: 2 bytes were erased at offset 0x000001fe (PMBR): 55 aa
/dev/sda: calling ioctl to re-read partition table: Success
```

## パーティションのフォーマット

いよいよ ZFS です。
参考文献：[3 ディスクのフォーマット - ZFS に Arch Linux をインストール - ArchWiki](https://wiki.archlinux.jp/index.php/ZFS_に_Arch_Linux_をインストール#.E3.83.87.E3.82.A3.E3.82.B9.E3.82.AF.E3.81.AE.E3.83.95.E3.82.A9.E3.83.BC.E3.83.9E.E3.83.83.E3.83.88)

まず、ZFS モジュールがロードされていることを確認。
下記コマンドで、結果が何も表示されなければ成功です。わかりにくい…

```console
# modprobe zfs
```

どうしても画面に反応が欲しいなら wc -l で出力行数を数えましょう。
0 だけが表示されれば成功です。問題があればエラーメッセージも表示される筈です。

```console
# modprobe zfs | wc -l
0
```

zpool を作成します。

このzpoolの名前なんですが、ArchWikiにはzpoolと書いてあります。コマンド名と同じというのも混乱の元ですし、そもそもOracle製のマニュアルに書いてある実行例ではtankなんですよね。FreeNASもtankです。
という訳で、ArchWikiとは違いますがここではtankと名付けます。

そしてもう1点。
デバイスの指定にはidを使え、とArchWikiに書かれています。しかしデバイス名からidを取得するコマンドが無い。SCSI関係のコマンドで取得できるようですが。
```ls -l /dev/disk/by-id``` を見ればわかるんですが、シンボリックリンク先が相対パスになっているのがまた残念。
それでも目で見ればわかるんですが、ファイル名が長いですし、コマンドで取得します。

```console
# cd /dev/disk/by-id
# ls ata-* | while read d; do if [ "$(readlink -f $d)" = "/dev/sda” ]; then echo "/dev/disk/by-id/$d"; fi; done | xargs -t zpool create -f tank
zpool create -f tank /dev/disk/by-id/ata-Hitachi-HTS723232A7A364_E3834263EDYUAD
# zpool status
  pool: tank
 state: ONLINE
  scan: none requested
config:

        NAME                                          STATE    READ WRITE CKSUM
        tank                                          ONLINE      0     0     0
          ata-Hitachi-HTS723232A7A364_E3834263EDYUAD  ONLINE      0     0     0

errors: No known data errors
```

最後のエラー「No known data errors」は「既知のエラーは何も無い」という意味です。だったら「Success」とか「ok」とか表示してくれればいいのに…

メインのファイルシステムとして tank/main を作成します。
また tank のマウントポイントは削除しますが、念の為noneではなくlegacyにしておきます。

```console
# zfs create -o mountpoint=/ tank/main
cannot mount '/': directory is not empty
filesystem successfully created, but not mounted
# zfs set mountpoint=legacy tank
# zfs list
NAME        USED  AVAIL  REFER  MOUNTPOINT
tank        150K   289G    24K  legacy
tank/main    24K   289G    24K  /
```

## サブファイルシステム

サブファイルシステムを作ります。

今回のノートパソコンではなくて、サーバとして建てたデスクトップマシンの為の設定ではありますが。今までの経験からユーザデータは分離した方が何かと都合が良い事がわかりました。システムがぶっ壊れた場合にもユーザデータを保護できるよう、システムとユーザの領域を分離します。その為にノートパソコンでもサブファイルシステムを用意します。

参考文献: [俺様サーバー構築記 - 待機系構築を睨んだディレクトリ構造の変更@デスクトップパソコン; やり直し](https://qiita.com/katz_engineer/items/e1d27692e9e5dd4e11c9)

以下の4つのディレクトリをサブファイルシステムにします。

- ```/home```
- ```/opt```
- ```/srv```
- ```/var/opt```

後日検討してもっと増える可能性もあります。例えば ```/usr``` ディレクトリは元々複数マシン間で共有対象となるコマンドなどの置き場所として FHS で仕様化されていますが、今回の用途では共有不要と考えました。その辺で判断が変わる可能性が無きにしも非ず。

参考文献: [重ね重ね・ArchLinux インストール覚書](https://qiita.com/katz_engineer/items/3c4bafd3aeb32aa2eaf0)

しかしマウントポイントは、なぜかうまく効いてくれません。理由がわからなくて、諦めました… ```genfstab``` の都合で設定しておきますが、後で ```/etc/fstab``` を作成したらlegacyに変更します。

```console
# for d in /home /opt /srv /var/opt; do zfs create -p tank/sub0$d -o mountpoint=$d; done
cannot mount '/srv': directory is not empty
filesystem successfully created, but not mounted
```

プロパティは```/var```のみ要求される物があるようです。

```console
# zfs set xattr=sa acltype=posixacl tank/sub0/var
```

## ブート用の設定

ルートファイルシステムに bootfs プロパティを設定します。

```console
# zpool set bootfs=tank/main tank
```

プール tank をエクスポートして、```/mnt``` 以下にインポートし直します。

```console
# zpool export tank
# zpool import -d /dev/disk/by-id -R /mnt tank
```

ここで、マウントポイントの /mnt を確認します。

```console
# mount | grep tank
tank/main on /mnt type zfs (rw,xattr,noacl)
tank/sub0/srv on /mnt/srv type zfs (rw,xattr,noacl)
tank/sub0/home on /mnt/home type zfs (rw,xattr,noacl)
tank/sub0/opt on /mnt/opt type zfs (rw,xattr,noacl)
tank/sub0/var/opt on /mnt/var/opt type zfs (rw,xattr,posixacl)
```

最後に、新しいシステムに zpool.cache ファイルをコピーします。そしてイヤらしい事に、 /etc/zfs/zpool.cache は存在するんですが中身がありません。最初はこれに気付かなくてエライ目に遭いました。

```console
# ls -l /etc/zfs/zpool.cache
-rw-r--r-- 1 root root 0 Jun 21 01:31 /etc/zfs/zpool.cache
# zpool set cachefile=/etc/zfs/zpool.cache tank
# ls -l /etc/zfs/zpool.cache
-rw-r--r-- 1 root root 1512 Jun 21 01:41 /etc/zfs/zpool.cache
# cp --parents /etc/zfs/zpool.cache /mnt
```

## bootパーティションのマウント

bootパーティションが無いのでマウントはしません。ディレクトリを作るだけです。

```console
# mkdir /mnt/boot
```

## インターネットへの接続

ネットワーク環境が確立しているかどうか、外部へのpingによって確認します。

```console
# ping -c2 archlinux.jp
PING archlinux.jp (160.16.119.98) 56(84) bytes of data.
64 bytes from tk2-235-27344.vs.sakura.ne.jp (160.16.119.98): icmp_seq=1 ttl=54 time=9.37 ms
64 bytes from tk2-235-27344.vs.sakura.ne.jp (160.16.119.98): icmp_seq=2 ttl=54 time=8.43 ms

--- archlinux.jp ping statistics ---
2 packets transmitted, 2 received, 0% packet loss, time 1000ms
rtt min/avg/max/mdev = 8.431/8.900/9.369/0.469 ms
```

## システムクロックの更新

ntpサーバは自分で設定したい。日本なら ntp.nict.jp が鉄板です。特殊事情が無ければこの一択。システム推奨なんか知りませ～ん。

```console
# cd /etc/systemd
# sed -i -e"s/^#NTP=.*$/NTP=ntp.nict.jp/" timesyncd.conf
# timedatectl set-ntp true
# timedatectl status
               Local time: Sun 2020-06-21 01:43:04 UTC
           Universal time: Sun 2020-06-21 01:43:04 UTC
                 RTC time: Sun 2020-06-21 01:43:04
                Time zone: UTC (UTC, +0000)
System clock synchronized: yes
              NTP service: active
          RTC in local TZ: no
# systemctl status systemd-timesyncd
  systemd-timesyncd.service - Network Time Synchronization
   Loaded: loaded (/usr/lib/systemd/system/systemd-timesyncd.service; enabled; vendor preset: enabled
   Active: active (running) since Sun 2020-06-21 01:43:02 UTC; 32s ago
     Docs: man:systemd-timesyncd.service(8)
 Main PID: 1492 (systemd-timesyn)
   Status: "Synchronized to time server 61.205.120.130:123 (ntp.nict.jp)."
    Tasks: 2 (limit: 3413)
   Memory: 1.7M
   CGroup: /system.slice/systemd-timesyncd.service
           └─1492 /usr/lib/systemd/systemd-timesyncd

Jun 21 01:43:02 archiso systemd[1]: Starting Network Time Synchronization...
Jun 21 01:43:02 archiso systemd[1]: Started Network Time Synchronization.
Jun 21 01:43:02 archiso systemd-timesyncd[1492]: Initial synchronization to time server 61.205.120.130:123 (ntp.nict.jp).
```

# インストール

## ミラーの選択

日本ならJapanをリスト先頭に持ってきましょう。っていうか、Japanだけ抜き出しました。下手に編集などするよりもコマンドが簡単なので。

```console
# cd /etc/pacman.d
# sed -i -ne"/^#.*Japan/,+1 p" mirrorlist
```

## ベースシステムのインストール

BIOSブートに必要なパッケージも同時に落としてきます。ブートローダはGRUBを使います。

今時は、CPUのデバッグ用パッチもOSが面倒を見るらしい。その為のパッケージintel-ucodeも落としておきます。

ZFS関連パッケージも落とします。

（2020/06/28 追記 ここから）
今回は普段使いの為のインストールなので、manなどもインストールしておきます。マニュアルだいじ。超だいじ。
（2020/06/28 追記 ここまで）

とりあえず現時点で必要最小限のパッケージはこれだけ。他に必要なパッケージは、必要に迫られた時に追加する事にします。

（2020/06/28 修正 ここから）

```console
# pacstrap /mnt base linux-lts zfs-linux-lts linux-firmware vi intel-ucode grub man-db man-pages texinfo
```

（2020/06/28 修正 ここまで）

# システムの設定

## pacman.conf

```console
# cd /mnt
# cat >>etc/pacman.conf <<'___'
\`heredoc>
\`heredoc> [archzfs]
\`heredoc> SigLevel = Never
\`heredoc> Server = http://archzfs.com/$repo/x86_64
\`heredoc> ___
```

## fstab

```console
# genfstab -U -p . >>etc/fstab
```


fstabを作成した後は、各サブファイルシステムのマウントポイントをlegacyにしておきます。

```console
# for d in /home /opt /srv /var/opt; do zfs set mountpoint=legacy tank/sub0$d; done
```

## hostid

zfsインストールに当たってはhostidが必要らしいです。ここで設定しておきましょう。
参考文献：[最初に起動した後 - ZFS に Arch Linux をインストール - ArchWiki](https://wiki.archlinux.jp/index.php/ZFS_に_Arch_Linux_をインストール#.E6.9C.80.E5.88.9D.E3.81.AB.E8.B5.B7.E5.8B.95.E3.81.97.E3.81.9F.E5.BE.8C)
ここに「/etc/hostid に hostid を書き出してから initramfs イメージを再生成する方法もあります」と書かれているので、その為の仕込みをします。

```console
# ls etc/hostid
ls: cannot access 'etc/hostid': No such file or directory
# hostid >etc/hostid
```

## chroot、タイムゾーン

```console
# arch-chroot .
# ln -fs /usr/share/zoneinfo/Japan /etc/localtime
# hwclock --systohc --utc
```

## ロケール

どの文字コードを有効にしても良いんですが。私は日本語系を全て有効にしました。個人的な好みでEUCは必須。最近の世界の流れも無視できないのでUTF-8も有効に。

```console
# sed -i -e"s/^#\(ja_JP\.\)/\1/" /etc/locale.gen
# locale-gen
Generating locales...
  ja_JP.EUC-JP... done
  ja_JP.UTF-8... done
Generation complete.
# echo LANG=C >/etc/locale.conf
# echo KEYMAP=jp106 >/etc/vconsole.conf
```

日本語フォントが入っていない場合は LANG=C にしておきましょう。文字化けが非常に鬱陶しい事になります。

## ホストネーム

マシンに名前を付けます。こういうのはセンスが出ますよね。なんて思うのは私だけ？

```console
# echo 〈ホスト名〉 >/etc/hostname
```

## Initramfs

ZFS対応の為に /etc/mkinitcpio.conf を修正します。
もしも /usr のデータセットを別に作成した場合は zfs フックの後に usr フックが必要らしい。今回は作っていないので不要。
また、ext3 や ext4 のファイルシステムを使用する場合は、末尾に fsck フックを入れます。今回は ZFS だけなので不要。

```console
# sed -i -e"s/^HOOKS=.*$/HOOKS=(base udev autodetect modconf block keyboard zfs filesystems)/" /etc/mkinitcpio.conf
```

initramfsを再生成。

```console
# mkinitcpio -p linux-lts
〈表示省略〉
但し、途中で警告が出た:
==> WARNING: Possibly missing firmware for module: wd719x
==> WARNING: Possibly missing firmware for module: aic94xx
良くわからないが、ひとまず無視
```

##　Rootパスワード

```console
# passwd
New password: 〈root用パスワード〉
Retype new password: 〈root用パスワード〉
passwd: password updated successfully
```

## ブートローダー

### GRUBをインストール

参考文献: [BIOS マザーボードの場合 - ブートローダーのインストールと設定 - ZFS に Arch Linux をインストール - ArchWiki](https://wiki.archlinux.jp/index.php/ZFS_に_Arch_Linux_をインストール#BIOS_.E3.83.9E.E3.82.B6.E3.83.BC.E3.83.9C.E3.83.BC.E3.83.89.E3.81.AE.E5.A0.B4.E5.90.88)

…が、/dev/sda にはインストールできません。パーティションを切ってない上にZFSだから当然ですな。

```console
# grub-install --target=i386-pc /dev/sda
Installing for i386-pc platform.
grub-install: error: failed to get canonical path of `/dev/ata-Hitachi_HTS723232A7A364_E3834263EDYUAD’.
# ln -s /dev/sda /dev/ata-Hitachi_HTS723232A7A364_E3834263EDYUAD
# grub-install --target=i386-pc /dev/sda
Installing for i386-pc platform.
grub-install: error: unknown filesystem.
# rm /dev/ata-Hitachi_HTS723232A7A364_E3834263EDYUAD
```

[パーティションレスディスクへのインストール](https://wiki.archlinux.jp/index.php/GRUB#.E3.83.91.E3.83.BC.E3.83.86.E3.82.A3.E3.82.B7.E3.83.A7.E3.83.B3.E3.82.84.E3.83.91.E3.83.BC.E3.83.86.E3.82.A3.E3.82.B7.E3.83.A7.E3.83.B3.E3.83.AC.E3.82.B9.E3.83.87.E3.82.A3.E3.82.B9.E3.82.AF.E3.81.AB.E3.82.A4.E3.83.B3.E3.82.B9.E3.83.88.E3.83.BC.E3.83.AB.E3.81.99.E3.82.8B)ってのもありましたけど、推奨されていないとの事。動作原理を考えれば当然です。

そこで、外部メディアのUSBメモリにGRUBをインストールします。起動用メディアを別に用意しなければならないのも業腹ですが、仕方ありませんな。
今回は、以前から使っていた小さなUSBメモリをUSB端子に挿しっ放しにしてあるので、これをそのまま流用します。

```console
# lsblk
NAME   MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
loop0    7:0    0   621M  1 loop /run/archiso/sfs/airootfs
sda      8:0    0 298.1G  0 disk
├─sda1   8:1    0 298.1G  0 part
├─sda9   8:9    0     8M  0 part
sdb      8:16   1   7.5G  0 disk
├─sdb1   8:17   1    16M  0 part
└─sdb2   8:18   1   7.4G  0 part
sdc      8:32   1   7.3G  0 disk
├─sdc1   8:33   1   686M  0 part
└─sdc2   8:34   1    64M  0 part
sr0     11:0    1  1024M  0 rom
```

該当のUSBメモリは```/dev/sdb```です。ここにGRUBを上書きインストールします。

参考文献1: [2.3.1.2 USB スティックにインストール - GRUB - ArchWiki](https://wiki.archlinux.jp/index.php/GRUB#USB_.E3.82.B9.E3.83.86.E3.82.A3.E3.83.83.E3.82.AF.E3.81.AB.E3.82.A4.E3.83.B3.E3.82.B9.E3.83.88.E3.83.BC.E3.83.AB)
参考文献2: [GRUB2 からZFS rootの FreeBSDの起動を試す - とりあえず TBD](http://sntk.hatenablog.com/entry/2014/02/16/164459)

```console
# exit
exit
arch-chroot . 31.08s user 9.35s system 5% cpu 13:20.90 total
# wipefs -a /dev/sdb
/dev/sdb: 2 bytes were erased at offset 0x000001fe (dos): 55 aa
/dev/sdb: calling ioctl to re-read partition table: Success
# sfdisk /dev/sdb <<___
\`heredoc> ,16M
\`heredoc> ,
\`heredoc>___
〈以下略〉
# mkfs.fat /dev/sdb1
mkfs.fat 4.1 (2017-01-24)
```

USBメモリの余った領域は、FAT32でフォーマットして自由に使えるように解放します。FAT32なら、万が一の場合はWindowsマシンでも読み出せますので。

```console
# mkfs.fat -F32 /dev/sdb2
mkfs.fat 4.1 (2017-01-24)
```

前準備が終わったのでGRUBをインストールします。

```console
# arch-chroot /mnt
# mount /dev/sdb1 /mnt
# grub-install --target=i386-pc --boot-directory=/mnt/boot /dev/sdb
Installing for i386-pc platform.
Installation finished. No error reported.
```

### 設定ファイル

```console
# cd /dev/disk/by-id/
# ls ata-* | while read d; do if [ "$(readlink -f $d)" = "/dev/sda” ]; then echo "/dev/$d"; fi; done | xargs -t ln -s /dev/sda
ln -s /dev/sda /dev/ata-Hitachi_HTS723232A7A364_E3834263EDYUAD
# cd /mnt/boot/grub
# grub-mkconfig -o grub.org
Generating grub configuration file ...
Found Linux image: /boot/vmlinuz-linux-lts
Found initrd image: /boot/intel-ucode.img /boot/initramfs-Linux-lts.img
/usr/bin/grub-probe: error: unknown filesystem.
/usr/bin/grub-probe: error: unknown filesystem.
Found fallback initrd image(s) in /boot: initramfs-linux-lts-fallback.img
/usr/bin/grub-probe: error: unknown filesystem.
done
# cp grub.org grub.cfg
# vi grub.cfg
〈編集〉
# diff -U0 grub.org grub.cfg
--- grub.org    2020-06-21 11:34:12.000000000 +0900
+++ grub.cfg    2020-06-21 11:38:32.000000000 +0900
@@ -84 +84,2 @@
-       insmod gzio
+       search --set --label tank
+       insmod zfs
@@ -87 +88 @@
-       linux /main@/boot/vmlinuz-linux-lts root=ZFS=/main rw  loglevel=3 quiet
+       linux /main@/boot/vmlinuz-linux-lts zfs=tank/main rw
@@ -95 +96,2 @@
-               insmod gzio
+               search --set --label tank
+               insmod zfs
@@ -98 +100 @@
-               linux /main@/boot/vmlinuz-linux-lts root=ZFS=/main rw  loglevel=3 quiet
+               linux /main@/boot/vmlinuz-linux-lts zfs=tank/main rw
@@ -105 +107,2 @@
-               insmod gzio
+               search --set --label tank
+               insmod zfs
@@ -108 +111 @@
-               linux /main@/boot/vmlinuz-linux-lts root=ZFS=/main rw  loglevel=3 quiet
+               linux /main@/boot/vmlinuz-linux-lts zfs=tank/main rw
# rm grub.org
# sync
# cd
# umount /mnt
```

## ネットワーク

NICのデバイス名についてですが。
systemdを使用すると、デバイス名を固定してくれるようです。

参考文献：[CentOS 7のネットワーク名「enp1s0」という文字列の謎に迫る](https://qiita.com/fetaro/items/b61282130fa638de4528)

従って面倒な設定は省きます。
とすると、やる事はDHCPクライアントの設定になります。

```console
# cat >/etc/systemd/network/all.network <<___
> [Match]
> Name=*
>
> [Network]
> DHCP=ipv4
> ___
```

ネットワークの有効化

```console
# systemctl enable systemd-networkd
Created symlink /etc/systemd/system/dbus-org.freedesktop.network1.service → /usr/lib/systemd/system/systemd-networkd.service.
Created symlink /etc/systemd/system/multi-user.target.wants/systemd-networkd.service → /usr/lib/systemd/system/systemd-networkd.service.
Created symlink /etc/systemd/system/sockets.target.wants/systemd-networkd.socket → /usr/lib/systemd/system/systemd-networkd.socket.
Created symlink /etc/systemd/system/network-online.target.wants/systemd-networkd-wait-online.service → /usr/lib/systemd/system/systemd-networkd-wait-online.service.
```

名前解決は ```/etc/resolv.conf``` ではなくて、systemd-resolved を使用するようです。DHCPによるDNSの指定を考慮してくれます。

参考文献: [必要なサービスと設定 - 基本的な使い方 - systemd-networkd - ArchWiki](https://wiki.archlinux.jp/index.php/Systemd-networkd#.E5.BF.85.E8.A6.81.E3.81.AA.E3.82.B5.E3.83.BC.E3.83.93.E3.82.B9.E3.81.A8.E8.A8.AD.E5.AE.9A)

```console
# systemctl enable systemd-resolved
Created symlink /etc/systemd/system/dbus-org.freedesktop.resolve1.service -> /usr/lib/systemd/system/systemd-resolved.service.
Created symlink /etc/systemd/system/multi-user.target.wants/systemd-resolved.service -> /usr/lib/systemd/system/systemd-resolved.service.
```

上記の参考文献には ```/etc/nsswitch.conf``` の hosts: 行に resolve を書くように記述されていますが、現在はデフォルトで書かれているようですので、それを確認。

```console
# grep "^hosts:" /etc/nsswitch.conf | grep resolve
hosts: files mymachines myhostname resolve [!UNAVAIL=return] dns
```

## 再起動

マシンをシャットダウン。

```console
# exit
exit
# cd
# zfs umount -a
# zpool export tank
# shutdown -h now
```

そして、インストールメディアであるUSBメモリを外した後に電源を入れます。GRUBをインストールしたUSBメモリはそのままにして、GRUBから起動するようにします。

# 最初に起動した後

ここまで問題が無ければ、再起動すると最初にGRUBのメニュー画面が表示されます。数秒放置するか、Enterキーを押すと起動します。

## rootログイン

rootユーザーでログインします。パスワードは先ほどpasswdコマンドで設定した通り。

```console

Arch Linux 5.4.47-1-lts (tty1)

〈ホスト名〉 login: root
Password: 〈root用パスワード〉
```

## ZFS の設定

```console
# systemctl enable zfs.target
Created symlink /etc/systemd/system/multi-user.target.wants/zfs.target -> /usr/lib/systemd/system/zfs.target.
# zpool set cachefile=/etc/zfs/zpool.cache tank
```

最後の cachefile の設定は、自動でマウントさせたいプールごとに実行する必要があるとの事。今回は tank のみです。

念の為に ```shutdown -h now```→電源入れ直して、再起動を確認できればOK。
も一つ念を入れて、再起動・ログイン後にzfsを確認：

```console
# mount | grep zfs
tank/main on / type zfs (rw,relatime,xattr,noacl)
tank/sub0/home on /home type zfs (rw,relatime,xattr,noacl)
tank/sub0/opt on /opt type zfs (rw,relatime,xattr,noacl)
tank/sub0/srv on /srv type zfs (rw,relatime,xattr,noacl)
tank/sub0/var/opt on /var/opt type zfs (rw,relatime,xattr,posixacl)
```

これで大丈夫でしょう。やったね :thumbsup_tone1: