82と83のリビジョン間の差分
2021-05-30 15:08:30時点のリビジョン82
サイズ: 58352
コメント:
2021-05-30 15:13:44時点のリビジョン83
サイズ: 58430
コメント:
削除された箇所はこのように表示されます。 追加された箇所はこのように表示されます。
行 776: 行 776:
chroot /tmp/zroot service routing stop
chroot /tmp/zroot service netif stop

FreeBSD13のインストール

FreeBSD 13.0-RELEASEをインストールしてみる。 本記述は13.0-R時点での内容であるが、13.0-Rがリリースされた後でも調整は入る可能性がある。

インストールが終った後は 初期設定 を参考にして欲しい。 さらに よくある設定 で典型的な設定をまとめた。 (サーバー)アプリケーション別については別途まとめる予定。

目次

  1. FreeBSD13のインストール
    1. FreeBSD13での特徴
      1. KTLS(4)対応
      2. VMware環境
      3. VirtIO環境
      4. Hyper-V環境
      5. ESP(EFI System Partition)の取り扱いの変更
    2. 前提条件
    3. 設定目標
    4. インストール設定
    5. 環境確認方法
      1. ブート環境
      2. ディスク一覧
      3. TRIM/UNMAP対応の確認
      4. AES-NI/SHA-NI対応の確認
      5. 時刻およびCMOSクロックのタイムゾーンの確認
  2. インストール
    1. インストールメディアの入手
    2. インストールメディアの起動とコンソールへ
    3. コマンド操作によるインストール作業
      1. パーティションを切る
      2. ファイルシステムをフォーマットする
      3. フォーマットしたファイルシステムをマウントしてディレクトリを準備する
      4. ブートローダーをインストールする
      5. パーティションを暗号化(GELI)する
      6. ZFSファイルシステムの構築
      7. 配布物のインストール
    4. 起動に必要な最低限の設定の実施
      1. /tmp/zroot/etc/fstab
      2. /tmp/zroot/boot/loader.conf
      3. /mnt/boot.config
      4. /tmp/zroot/etc/rc.conf
      5. /tmp/zroot/etc/hostid
      6. /tmp/zroot/etc/resolv.conf
      7. /tmp/zroot/etc/localtime
      8. /tmp/zroot/etc/ntp.conf
      9. /tmp/zroot/etc/ssh/sshd_config
      10. /tmp/zroot/root/.ssh/authorized_keys
      11. 再起動する
  3. よくある質問とその答え
    1. Q.SHA-NIに対応したCPUなんてあるんですか?
    2. Q.これ全部手で入力するんですか?
    3. Q.ZFSパーティションを確保するときの計算式が意味不明です。説明求む!
    4. Q.何故ISOイメージではなくメモリスティックを使わないのですか?
    5. Q.後日のメディア拡張のことを考慮するとスワップパーティションは前の方にあった方がいいのでは?
    6. Q.境界にアライメントするなら多少のフリー領域があってもいいのでは? 誤差ではかと
    7. Q.インストール時に kern.geom.label.disk_ident.enable を設定しているけど、loader.conf に指定しない理由は?
  4. 参考文献

FreeBSD13での特徴

詳しくはリリースノートを読んでもらうとして「環境」における気がついた点を紹介する。

KTLS(4)対応

カーネル内でTLS暗号処理を行えるようになった。たぶんこれはキャッチーな話題だと思う(実際のところは別にして)。

  • 従来はファイルを暗号化して送信したいようなケースで、ファイル読み込み(カーネル)→暗号処理(ユーザーランド)→ネットワーク送信(カーネル)という処理(コンテキストスイッチ)が必要でした。
  • これが全て、カーネル内で処理されるようになります(オーバーヘッドが減る)。
  • 今回のリリース版では、この機能はほぼ全て無効になっています。
    • ただしGENERICには組み込まれています。
    • 組み込まれていますが、全ての機能がデフォルト無効でのリリースです。
    • KTLSを使うアプリで無いと…なのですが、その辺りを良きに計らってくれるはずのOS標準のOpenSSLは、KTLS対応無効でコンパイルされています。
  • ということで、有効化のためには以下の対応がまず必要になります。
    • /etc/src.confWITH_OPENSSL_KTLS=yes 行を追加してソースコンパイルするか

    • security/openssl-devel をコンパイルして、それを使用するか

    • といった対応が必要になります。
  • なおカーネル機能の有効化には更に sysctl kern.ipc.tls 以下のいくつかのパラメータを設定してやる必要があります。

  • なお自分は効果未検証です。
  • www/apache24 ポートでKTLS回りの修正が入ったのですが、ApacheはカスタムBIOを使用してるそうで、KTLSの恩恵が受けられません。 orz

VMware環境

いわゆるvSphere、ESXi、VMwareワークステーション等といった環境上で稼動する上での特徴について述べる。

  • 準仮想化HBA(ホストバスアダプター)ドライバー(pvscsi(4))を標準(GENERIC)で搭載するようになりました。

  • これは最新のVMware環境であれば、ストレージにNVMeを選択すべきですが、様々な都合で、いわゆるHBAを使わざるを得ないときにPVSCSIを選択できるようになったことを意味します。
  • またVMCIドライバーが標準で組み込まれるようになりました。このドライバー自体は12.0-Rから存在していましたが、明示的に組み込む必要がありました。
  • VMCIドライバーが組み込まれていると、VMware Toolsは安全なチャネルでホスト側と通信するようになるため、ハイパーバイザー(ESXi)は安定的にゲストOSの状態をモニタリングできるようになります。

  • これは特に、Vモーションが安定して実行できることを意味します。
  • VMXNET3ドライバーは従来通りOS標準で。バルーンメモリ等についてもVMware Toolsインストールすることで対応しています。

VirtIO環境

いわゆるKVM、QEMU、BHyVe等の環境上で稼動する上での特徴について述べる。

  • virtio_blk(4) ドライバでTRIM/UNMAPに対応しました。ホスト側でサポートしていれば、自動的に有効になります。

  • 昔からVirtIO関連のドライバは標準(GENERIC)で搭載されていることもあり、特に設定は必要ありません。

Hyper-V環境

特に明記すべき点は改善点は無い(ほぼ完成している)のですが、FreeBSD13 を Hyper-V 環境にインストールしてみた所感にてセットアップしてみた感じをレポートしてみました。

ESP(EFI System Partition)の取り扱いの変更

  • UEFIブート環境における従来のインストーラでESPを作成した場合の方が対象になります。
  • 以下のケースは対象外となります。
    • 従来のインストーラーでもBIOSブート環境の場合。
    • 本バージョン以降のインストーラの使用する場合。
    • 本手順によりESPを作成していたケースの場合。
  • 従来のインストーラでは boot1.efifat という形でESPをパッケージングした上で gpart(8) コマンドで更新する、という手順になっていました。

  • これを止めて、ESPは /boot/efi 以下にマウントした上で更新してください、とのアナウンスです。

  • これは、ESPの使用(ブート以外にも)ニーズがあり、従来の柔軟性のないアプローチが望ましくなくなったことによります。
  • ついに時代がついに追いついた感が…。

前提条件

  • CMOS(BIOS)クロックのタイムゾーンをUTCとする。
    • ほとんどのクラウド環境では本設定を変更することができないか、極めて困難である。
    • 物理環境では変更しやすいし、メンテナンス性も高いのだが、設定の統一性から見なかったことにする。
    • よく出来た物理環境では、内部時間と表示時間(タイムゾーン情報を有す)を変えられるものも出てきたので、昔ほどJSTにこだわらなくてもよい。
  • CPUについては特に明記しないし、1コアからでも使用できるが、2コア以上をお勧めしたい。
    • 使用する用途に応じてCPU数や動作周波数、アーキテクチャを選ぶこと。
    • 基本的には「時間」に影響出るが、投入したリソースに応じて反比例(少ないと時間がかかる、多いと時間が短縮される)する。
  • 搭載メモリはできれば4GB以上にしておきたい。
    • カツっカツにチューニングすれば512MBでも動作するが、その後はあまりできることが少ない。
    • FreeBSD本体のビルドに6GBは必要なので、3GBや2GBの環境だとスワップアウトがキツイ。
    • これはC++のコンパイル負荷によるものなので、搭載メモリが少ない環境でのビルド(サードパーティ製含む)は諦めた方がよい。
    • 良好に使用するなら8GB以上は欲しいところではある。
  • 搭載ストレージもできれば50GB以上は欲しいところ。
    • 30GB程度では一通りのセットアップで埋まってしまう程度の容量なので、大きめに欲しいところ。
    • 用途にもよるがログ保存等を考慮すると100GB程度あれば安心である。
  • インストール先メディア(ストレージ)に応じてデバイス名を読み替えること。今回、ここでは vtbd≧0) を使用する。

    • ada: SATA接続のHDDおよびSSD

    • da: USB/SAS/SCSI/NVMe接続の(マスストレージ)HDDおよびSSD

    • nvd: NVMe接続SSD(旧式)

    • mmscd: eMMC(内蔵メモリカード)

    • vtbd: バーチャルI/Oストレージ(KVM、QEMU、BHyVe環境他)

    • xbd: Xen準仮想化ドライバ(Xen環境)

  • NIC(ネットワークインターフェース)は実機に応じてデバイス名に応じて読み替えること。ここでは vtnet≧0)を使用する。

    • 典型的なNICはたくさんあるのでここでは有名どころをいくつか。
    • vtnet: バーチャルI/Oネットワーク(KVM、QEMU、BHyVe環境他)

    • ena: AWSの仮想化ネットワーク(Elastic Network Adapter

    • hn: Hyper-V仮想化ネットワーク(Hyper-V Network Interface

    • xn: Xen仮想化ネットワーク

    • re: リアルテック社製GbEネットワークカード

設定目標

  • 全てGPTパーティション(領域)で組むものとして、BIOSまたはUEFI環境での起動を前提とする(マルチブートは考えない)。
    • BIOSまたはUEFIがブート用に認識するパーティション
    • /boot 用パーティション(UFSで構成する)
    • / 用のパーティション(ZFSで構成する)
    • スワップパーティション
  • またこの時以下のサイズを割り当てる。
    • ブートパーティション: BIOS環境=512KB弱、UEFI環境=200MB程度
    • UFSパーティション: 4GB弱 ※実用512MB・最低でも2倍の1GB程度はあった方がよい
    • ZFSパーティション: 残りサイズを計算して割り当て
    • スワップパーティション: 8GB程度 ※搭載メモリの2倍で最大8GB程度に
  • スワップについてメモ:
    • スワップはおおよそ「搭載メモリの2倍」で確保だが、一定量を超えると使用しなくなるため、この辺り(8GB程度)で打ち止めしておくのがよい。
    • またどれほど搭載メモリが多くてもゼロスワップ運用はお勧めしない。
    • カーネルがメモリのガベージコレクトする時にスワップを使用することがあるので、巨大な連続領域を確保できなくなることがありうる。
  • またパーティション境界を可能な限り「各種」境界を考慮して割り当てることを目指す。とりあえず1MB境界で設定する。
    • 1ブロック512バイトが最小単位であるが、
    • 4KBセクタードライブであったり、
    • SSDのページ単位(2KB~)・ブロック単位(128KB~)を考慮したり、
    • HDD SMRのブロック単位(256MB)を考慮しての結果。
    • 容量とのバランスで1MB程度にしておく。そのうち1GB単位にしてもいいかもしれない。
    • SMRの256MBについては、実運用とのバランスを考えると考慮に値しなくてよい(OS用に使うべきで無い)。
    • SSDのページ、ブロックの単位は大容量化にともない大きくなっていくので、この数字が正しいとは限らない。
  • UFSブート、ZFSルート構成についてのメリットとデメリット。
    • 構造がシンプルでないので若干の小細工が必要。
    • インストーラーからインストールできないので、全ての手順でコマンドを叩く必要がある。
    • その代わりブートローダーがZプールの最新に対応してなくてよいので安心して zpool upgrade ができる。

    • パスフレーズとキーファイルによるZFS領域の暗号化(GELI)が可能(パスフレーズのみでいいならブートローダーからでも可)。
  • ZFS領域とスワップ領域については暗号化を施す。
    • ブート時点からセキュアでは無いが、セキュアブートの仕組みが今のところ確立されてないので、この辺りが限界。
    • クラウド環境でセキュアブートの仕組みが提供されていることがないので、頑張る余地があるか微妙。
    • 逆にクラウド環境では暗号化の仕組みが用意されているのでそちらを利用すること。
    • 個別に本手順を実施する分には問題無いが、イメージそのままでデプロイすると、同じ暗号化鍵を使ったイメージがコピーされるのでよろしい運用では無い。
    • 当然暗号鍵の変更をオンザフライでできるが、どれくらい時間がかかるかは不明。
    • 本手順の場合、キーファイルを消去(参照不能なレベルで)するだけで廃棄可能。パスフレーズは同じでも問題ない。
    • 今時のCPUは、AES-NI対応については疑義は無いが、SHA-NI対応については限定的なので、その点を考慮した設定を行う。
  • TRIM/UNMAPを考慮(最適化)する。
    • sysctl kern.geom.disk.デバイス名.flags を実行して CANDELETE の表示があれば、TRIM/UNMAPに対応している。

    • この表示が無ければTRIM/UNMAPに対応してないことを意味する。

インストール設定

以下のパーティション構成を組む。ブート環境に応じて選択する。

BIOSブート環境

パーティション番号

パーティション種別

用途

サイズ

注意

-

GPTヘッダー

Protected MBR ブート

40 ブロック 

UEFIブート環境では Protected MBR は参照されない。

1

freebsd-boot

BIOS用FreeBSDブート領域

984 ブロック 

UFS領域を512KB境界(※)に設置するためのサイズを指定。

2

freebsd-ufs

UFS領域(/boot として使用)

8387584 ブロック 

ZFS領域を4GB境界に設置するためのサイズを指定。

3

freebsd-zfs

ZFS領域(/ として使用)

※都度計算※

スワップ領域を1GB境界に設置するためのサイズを指定。

4

freebsd-swap

スワップ領域(搭載メモリの2倍≦8GB)

16777216 ブロック~

8GB+補正分。

UEFIブート環境

パーティション番号

パーティション種別

用途

サイズ

注意

-

GPTヘッダー

-

40 ブロック 

1

efi

UEFI領域(FAT32フォーマット)

409560 ブロック 

UFS領域を200MB境界に設置するためのサイズを指定。

2

freebsd-ufs

UFS領域(/boot として使用)

7979008 ブロック 

ZFS領域を4GB境界に設置するためのサイズを指定。

3

freebsd-zfs

ZFS領域(/ として使用)

※都度計算※

スワップ領域を1GB境界に設置するためのサイズを指定。

4

freebsd-swap

スワップ領域(搭載メモリの2倍≦8GB)

16777216 ブロック~

8GB+補正分。

両用ブート環境(BIOSおよびUEFIともに共存するブート環境)

パーティション番号

パーティション種別

用途

サイズ

注意

-

GPTヘッダー

Protected MBR ブート

40 ブロック 

UEFIブート環境では Protected MBR は参照されない。

1

freebsd-boot

BIOS用FreeBSDブート領域

984 ブロック 

EFI領域を512KB境界(※)に設置するためのサイズを指定。

2

efi

UEFI領域(FAT32フォーマット)

408576 ブロック 

UFS領域を200MB境界に設置するためのサイズを指定。

3

freebsd-ufs

UFS領域(/boot として使用)

7979008 ブロック 

ZFS領域を4GB境界に設置するためのサイズを指定。

4

freebsd-zfs

ZFS領域(/ として使用)

※都度計算※

スワップ領域を1GB境界に設置するためのサイズを指定。

5

freebsd-swap

スワップ領域(搭載メモリの2倍≦8GB)

16777216 ブロック~

8GB+補正分。

  • freebsd-boot パーティションのサイズ制限は gpart(8) のマニュアルBOOTSTRAPPING 節に記述がある。

  • BIOSおよびUEFIどちらの環境でもブート可能なよう構成することは可能だが、実機環境の切り替え動作は未検証。
  • GPTエントリ数(デフォルト128)は変更しない。変更すると起動しないことが gptboot(8)gptzfsboot(8) のマニュアルに明記されている。

環境確認方法

OS起動後になるが、以下のコマンドで環境を確認できる。実際にインストール時に確認すること。 以下はある環境での実行結果である。

check-list-environment.png

ブート環境

sysctl machdep.bootmethod

この時「BIOS」と表示されればBIOSブート環境、「UEFI」と表示されればUEFIブート環境である。

ディスク一覧

geom disk status

ディスク一覧が表示される(この時 Status と Components が N/A となるのは無視して良い)。
下記は実行例であるが、下記の実効例の場合、インストール先メディアを選ぶこと(mmcsd0 または ada0)。

root@:~ # geom disk status
       Name  Status  Components
     mmcsd0     N/A  N/A
mmcsd0boot0     N/A  N/A
mmcsd0boot1     N/A  N/A
       ada0     N/A  N/A

TRIM/UNMAP対応の確認

sysctl kern.geom.disk.デバイス名.flags

先に確認したインストール先メディア(デバイス)に対して上記コマンドを実行する。下記の実行例のように CANDELETE の表示があれば、対応している。

root@:~ # sysctl kern.geom.disk.ada0.flags
kern.geom.disk.ada0.flags: be<OPEN,CANDELETE,CANFLUSHCACHE,UNMAPPEDBIO,DIRECTCOMPLETION,CANZONE>

AES-NI/SHA-NI対応の確認

sysctl dev.aesni.0.%desc

この時「AES-XTS」の表示があること(あればAES-NIに対応)。「SHA256」の表示があること(あればSHA-NIに対応)。

時刻およびCMOSクロックのタイムゾーンの確認

sysctl machdep.wall_cmos_clock
date
  • 確認項目としては以下の通り。
    • sysctl machdep.wall_cmos_clock の結果が0であること(LiveCDでは1になることはありません)。

    • date の結果が日本時間から9時間前で「UTC」を含むこと(LiveCDでは少なくとも「UTC」です)。

  • 対応が必要なケースとしては以下の通り。
    • 日本時間と同一: CMOSクロックが日本時間になっています。 date HHMM.SS を実行して時間調整します(HH/MM/SSは現在時刻から9時間マイナスで置き換え)。

    • もっと変な時間: 根本的に時刻設定がされていません。あるいはCMOSバッテリが消耗していて電源を落すと時間を忘れます。一時的には date コマンドで修正できますが、ハードウェアについては別対応が必要(これ以上は取り扱わず)。

インストール

インストールメディアの入手

  • Index of /ftp/releases/ISO-IMAGES/13.0より、FreeBSD-13.0-amd64-disc1.iso というISOイメージファイルをダウンロードする。

    • 今回 amd64 環境、いわゆる x86_64 環境にインストールするものとする。
    • arm64 と名称が似ているが、こちらは arm64-aarch64 環境と別物なので注意。
    • また dvd1 ではなく disc1 である。幸い dvd1 は disc1 を内包しているので、無駄を承知で使用してもよい。
    • その代わり bootonly では必要なものが足りないので、ネットにアクセスできる必要がある(ここでは詳細を取り上げない)。
  • このISOイメージをCDメディアとして認識させる。
    • 物理的にはもちろん、CD-Rに焼いてもかまわない。
    • 個人的には Hagiwara Solutions 社製 CD Memory2 の使用をお勧めする。

    • 入手性については ぷらっとオンライン が一番確実である。

    • ISOイメージの書き込みに専用ソフト(CDM2 Writer)を必要とするが、

    • 読み取り処理はCDROMドライブのエミュレーションしか行わないので、非常に互換性が高い。
    • 似たようなハードは売られているので、使い慣れた物を使用しても問題無い。

インストールメディアの起動とコンソールへ

ISOイメージからシステムがブートすると下記の画面が表示される。表示されない場合は起動順序に問題がある(ほぼこれ)、認識してない(挿入ミス、接続されてないなど、希に)ので確認する(確認手順は難しいのでここでは省略)。
10秒カウントダウンの後、OSが起動するので、その前に「3」を押す。あるいはスペースキーを押すとカウントダウンが止まる。

beastie-on-boot.png

3を押すと下記のようにプロンプトが表示されるので、

prompt-on-boot.png

以下のコマンドを入力して起動する(実施しなかったとしてもペナルティは無い)。

set hint.psm.0.disabled="1"
set kern.geom.label.disk_ident.enable="0"
boot
  • hint.psm.0.disabled: PS/2マウス(USB接続ではない)の識別(1秒かかる)を止める。

  • kern.geom.label.disk_ident.enablegpart show を実行したときに同じストレージをラベルで参照することを止める(結果として二重表示になる)。

setting-on-boot.png

環境によっては、下記の追加設定を実施しても良い。ただしキー入力を受け付けなくなることがあるので、要動作確認のこと。

set hint.atkbdc.0.disabled="1"
set hint.atkbd.0.disabled="1"

今時のハードウェアだと、この手のレガシー(PS/2接続)デバイスのエミュレーションの互換性が低い(遅い等)ことがあるので、可能な限り積極的に設定してみることをお勧めする。

start-bsdinstall.png

上記画面が表示されるので、「<Live CD>」を選択(カーソルキーで→に移動、エンターキーを押す)する。

start-console-login.png

ログインプロンプトが表示されるので「root」を入力してエンターキーを押す(パスワード入力は求められない)。

コマンド操作によるインストール作業

先に情報収集が成されているものとして以下のコマンドを実行する。

コマンド入力に当り、デフォルトで英語キーボードモードになっているので、日本語キーボードモードに変更したい場合は下記のコマンドを実行する。

kbdcontrol -l jp < /dev/console

英語キーボードモードに戻したい場合は -l オプションに与えるキーボード種別に us を指定する。

パーティションを切る

  • 両用ブート環境の場合、以下の手順でパーティションを切る(設定状態を都度 gpart show で確認できる)。

gpart destroy -F vtbd0
gpart create -s GPT vtbd0
gpart add -t freebsd-boot -s     984 vtbd0
gpart add -t efi          -s  408576 vtbd0
gpart add -t freebsd-ufs  -s 7979008 vtbd0
gpart add -t freebsd-zfs  -s `gpart show vtbd0 | awk '/- free -/{ st = $1; sz = $2; sw = ( 8 * 1024 * 1024 * 1024 ) / 512; aln = ( 1024 * 1024 * 1024 ) / 512; sz -= sw; sz -= ( st + sz ) % aln; print sz }'` vtbd0
gpart add -t freebsd-swap            vtbd0
  • BIOSブート環境の場合、以下の手順でパーティションを切る(設定状態を都度 gpart show で確認できる)。

gpart destroy -F vtbd0
gpart create -s GPT vtbd0
gpart add -t freebsd-boot -s     984 vtbd0
gpart add -t freebsd-ufs  -s 8387584 vtbd0
gpart add -t freebsd-zfs  -s `gpart show vtbd0 | awk '/- free -/{ st = $1; sz = $2; sw = ( 8 * 1024 * 1024 * 1024 ) / 512; aln = ( 1024 * 1024 * 1024 ) / 512; sz -= sw; sz -= ( st + sz ) % aln; print sz }'` vtbd0
gpart add -t freebsd-swap            vtbd0
  • UEFIブート環境の場合、以下の手順でパーティションを切る(設定状態を都度 gpart show で確認できる)。

gpart destroy -F vtbd0
gpart create -s GPT vtbd0
gpart add -t efi          -s  409560 vtbd0
gpart add -t freebsd-ufs  -s 7979008 vtbd0
gpart add -t freebsd-zfs  -s `gpart show vtbd0 | awk '/- free -/{ st = $1; sz = $2; sw = ( 8 * 1024 * 1024 * 1024 ) / 512; aln = ( 1024 * 1024 * 1024 ) / 512; sz -= sw; sz -= ( st + sz ) % aln; print sz }'` vtbd0
gpart add -t freebsd-swap            vtbd0

ファイルシステムをフォーマットする

  • TRIM/UNMAP対応の場合、以下の手順でフォーマットする。

# BIOSブート環境またはUEFIブート環境の場合はこちら #
newfs -U -j -E -t /dev/vtbd0p2

# 両用ブート環境の場合はこちら #
newfs -U -j -E -t /dev/vtbd0p3
  • TRIM/UNMAPに未対応の場合、以下の手順でフォーマットする。

# BIOSブート環境またはUEFIブート環境の場合はこちら #
newfs -U -j /dev/vtbd0p2

# 両用ブート環境の場合はこちら #
newfs -U -j /dev/vtbd0p3
  • 更にUEFIブート環境または両用ブート環境の場合、以下の手順でフォーマットする。

# UEFIブート環境の場合はこちら #
newfs_msdos -F 32 -c 1 -L EFISYS /dev/vtbd0p1

# 両用ブート環境の場合はこちら #
newfs_msdos -F 32 -c 1 -L EFISYS /dev/vtbd0p2

フォーマットしたファイルシステムをマウントしてディレクトリを準備する

以下の手順を実施する。

# BIOSブート環境またはUEFIブート環境の場合はこちら #
mount -t ufs -o rw,async,noatime /dev/vtbd0p2 /mnt
mkdir -p /mnt/boot/efi /mnt/boot/zfs

# 両用ブート環境の場合はこちら #
mount -t ufs -o rw,async,noatime /dev/vtbd0p3 /mnt
mkdir -p /mnt/boot/efi /mnt/boot/zfs

更にUEFIブート環境または両用ブート環境の場合、以下の手順を実施する。

# UEFIブート環境の場合はこちら #
mount -t msdosfs /dev/vtbd0p1 /mnt/boot/efi
mkdir -p /mnt/boot/efi/EFI/BOOT

# 両用ブート環境の場合はこちら #
mount -t msdosfs /dev/vtbd0p2 /mnt/boot/efi
mkdir -p /mnt/boot/efi/EFI/BOOT

ブートローダーをインストールする

  • BIOSブート環境または両用ブート環境の場合、以下の手順でブートローダーをインストールする。

gpart bootcode -b /boot/pmbr -p /boot/gptboot -i 1 vtbd0
  • UEFIブート環境または両用ブート環境の場合、以下の手順でブートローダーをインストールする。

cp -a /boot/loader.efi /mnt/boot/efi/EFI/BOOT/BOOTX64.efi

# UEFI環境では下記のコマンドを実行できる ※BIOS環境では実行できない #
efibootmgr --verbose --create --activate --label FreeBSD --loader /mnt/boot/efi/EFI/BOOT/BOOTX64.efi

efibootmgr の実行は必須ではない。これの「登録」作業が行われてない場合、デフォルトの起動ファイルを読みに行くので、クリーンな環境では問題無い。

パーティションを暗号化(GELI)する

BIOSブート環境またはUEFIブート環境の場合、以下の手順でZFSパーティションを暗号化(GELI)を施す。

kldload geom_eli

dd if=/dev/random of=/mnt/vtbd0p3.key bs=64 count=1
chmod 0400 /mnt/vtbd0p3.key
chflags schg /mnt/vtbd0p3.key

# SHA-NI対応CPUではこちら
geli init -b -B none -e AES-XTS -l 256 -a HMAC/SHA256 -s 4096 -K /mnt/vtbd0p3.key /dev/vtbd0p3
geli attach -k /mnt/vtbd0p3.key /dev/vtbd0p3

# SHA-NIに未対応のCPUではこちら
geli init -b -B none -e AES-XTS -l 256                -s 4096 -K /mnt/vtbd0p3.key /dev/vtbd0p3
geli attach -k /mnt/vtbd0p3.key /dev/vtbd0p3

両用ブート環境の場合、以下の手順でZFSパーティションを暗号化(GELI)を施す。

kldload geom_eli

dd if=/dev/random of=/mnt/vtbd0p4.key bs=64 count=1
chmod 0400 /mnt/vtbd0p4.key
chflags schg /mnt/vtbd0p4.key

# SHA-NI対応CPUではこちら
geli init -b -B none -e AES-XTS -l 256 -a HMAC/SHA256 -s 4096 -K /mnt/vtbd0p4.key /dev/vtbd0p4
geli attach -k /mnt/vtbd0p4.key /dev/vtbd0p4

# SHA-NIに未対応のCPUではこちら
geli init -b -B none -e AES-XTS -l 256                -s 4096 -K /mnt/vtbd0p4.key /dev/vtbd0p4
geli attach -k /mnt/vtbd0p4.key /dev/vtbd0p4

ZFSファイルシステムの構築

両用ブート環境では vtbd0p3 → vtbd0p4 と置き換えること。

mkdir -p /tmp/zroot

# 両用ブート環境の場合はこちら #
zpool create -o cachefile=/mnt/boot/zfs/zpool.cache -o altroot=/tmp/zroot -O atime=off -O compression=lz4 -m legacy zroot vtbd0p4.eli

# BIOSブート環境またはUEFIブート環境の場合はこちら #
zpool create -o cachefile=/mnt/boot/zfs/zpool.cache -o altroot=/tmp/zroot -O atime=off -O compression=lz4 -m legacy zroot vtbd0p3.eli

mount -t zfs -o rw,noatime zroot /tmp/zroot

zfs create -o mountpoint=/home zroot/home
zfs create -o mountpoint=/tmp  zroot/tmp
zfs create -o mountpoint=/usr  zroot/usr
zfs create -o mountpoint=/var  zroot/var
zfs create zroot/usr/local
zfs create zroot/var/empty
zfs create zroot/var/log
zfs create zroot/var/spool
zfs create zroot/var/spool/mqueue
zfs create zroot/var/tmp

mkdir -p /tmp/zroot/boot /tmp/zroot/bootdir
mount -t nullfs /mnt/boot /tmp/zroot/boot

配布物のインストール

tar -xpf /usr/freebsd-dist/base.txz   -C /tmp/zroot
tar -xpf /usr/freebsd-dist/kernel.txz -C /tmp/zroot
tar -xpf /usr/freebsd-dist/lib32.txz  -C /tmp/zroot

zfs set readonly=on zroot/var/empty

起動に必要な最低限の設定の実施

/tmp/zroot/etc/fstab

※TRIM/UNMAP対応環境ではスワップタイプのオプション swsw,trimonce に変更すること(コメント参照)

  • 両用ブート環境の場合、以下の内容でファイルを作成する。

# Device                Mountpoint      FStype  Options                 Dump    Pass #
zroot                   /               zfs     rw,noatime              0       0
/dev/vtbd0p3            /bootdir        ufs     rw,noatime              1       1
/bootdir/boot           /boot           nullfs  rw                      0       0
/dev/vtbd0p2            /boot/efi       msdosfs rw                      0       0
/dev/vtbd0p5.eli        none            swap    sw                      0       0
#/dev/vtbd0p5.eli       none            swap    sw,trimeonce            0       0
  • BIOSブート環境の場合、以下の内容でファイルを作成する。

# Device                Mountpoint      FStype  Options                 Dump    Pass #
zroot                   /               zfs     rw,noatime              0       0
/dev/vtbd0p2            /bootdir        ufs     rw,noatime              1       1
/bootdir/boot           /boot           nullfs  rw                      0       0
/dev/vtbd0p4.eli        none            swap    sw                      0       0
#/dev/vtbd0p4.eli       none            swap    sw,trimeonce            0       0
  • UEFIブート環境の場合、以下の内容でファイルを作成する。

# Device                Mountpoint      FStype  Options                 Dump    Pass #
zroot                   /               zfs     rw,noatime              0       0
/dev/vtbd0p2            /bootdir        ufs     rw,noatime              1       1
/bootdir/boot           /boot           nullfs  rw                      0       0
/dev/vtbd0p1            /boot/efi       msdosfs rw                      0       0
/dev/vtbd0p4.eli        none            swap    sw                      0       0
#/dev/vtbd0p4.eli       none            swap    sw,trimeonce            0       0

/tmp/zroot/boot/loader.conf

autoboot_delay="5"
beastie_disable="YES"
hostuuid_name="/boot/hostid"

#hint.atkbdc.0.disabled="1"
#hint.atkbd.0.disabled="1"
hint.psm.0.disabled="1"

zfs_load="YES"
nullfs_load="YES"
geom_eli_load="YES"

vfs.root.mountfrom="zfs:zroot"
vfs.root.mountfrom.options="rw,noatime"

# UEFIブート環境またはBIOSブート環境ではこちらの設定を使用する #
geli_vtbd0p3_keyfile0_load="YES"
geli_vtbd0p3_keyfile0_type="vtbd0p3:geli_keyfile0"
geli_vtbd0p3_keyfile0_name="/vtbd0p3.key"

# 両用ブート環境ではこちらの設定を使用する #
#geli_vtbd0p4_keyfile0_load="YES"
#geli_vtbd0p4_keyfile0_type="vtbd0p4:geli_keyfile0"
#geli_vtbd0p4_keyfile0_name="/vtbd0p4.key"

/mnt/boot.config

-D

必要があればここで、ブートコマンド(ローダーの)に対する設定を行う。 詳細は boot(8)のマニュアル にて。

よくあるシリアルコンソールに関する設定は以下の通りである。

  • -D: コンソールを内蔵ディスプレイ(キーボード)とシリアルの両方に設定する。

  • -h: コンソールを強制的にシリアルコンソールに設定する。

  • -P: コンソールを、キーボードがあれば両方に、なければシリアルのみに設定する。

/tmp/zroot/etc/rc.conf

keymap="jp"
keyrate="fast"
zfs_enable="YES"
clear_tmp_enable="YES"
moused_nondefault_enable="NO"

hostname="ホスト名"

defaultrouter="IPv4デフォルトゲートウェイ"
ifconfig_vtnet0="inet IPv4アドレス/ネットマスク値 up"

ipv6_defaultrouter="IPv6デフォルトゲートウェイ"
ifconfig_vtnet0_ipv6="inet6 IPv6アドレス prefixlen 64"

sshd_enable="YES"
ntpd_enable="YES"
ntpd_sync_on_start="YES"
  • キーマップは日本語キーボードの場合 jp で、英語キーボードの場合は us で設定する。

  • IPv4が無い環境では defaultrouterifconfig_vtnet0 の設定は不要。

  • IPv6が無い環境では ipv6_defaultrouterifconfig_vtnet0_ipv6 の設定は不要。

  • IPv6については指定のあったインターフェースのみ、IPv6が有効化されるようになっている。
  • そのため ipv6_activate_all_interfaces の設定は完全に不要になった。互換性の都合上、設定は残ってるが、機能的には変わらない。

  • 後から追加されるようなインターフェース(ngなど)でIPv6を有効化したい場合には、使用するツールにおいて都度設定を入れるようにする。

IPv4アドレスをDHCPで取得する場合

IPv4アドレスをDHCPで動的に取得する場合、設定は下記の通りとなる。

ifconfig_vtnet0="SYNCDHCP"

この時、DHCPサーバーからの設定内容を受け取るまで待った後(待たなくていいなら ifconfig_vtnet0="DHCP" でもよいがお勧めしない)、以下の設定が行われる。

  • ホスト名(hostname 設定相当)

  • 指定したNIC(vtnet0)に対するIPv4アドレス(ifconfig_vtnet0 設定相当)

  • デフォルトゲートウェイ(defaultrouter 設定相当)

  • DNSキャッシュサーバー情報(/etc/resolv.conf 置き換え)

    • DHCPを使用する場合 /etc/resolv.conf の事前設定された内容は保証されない(消えることがある)。

    • よってDHCPで置き換えて欲しくない設定や、足りない設定の付与等については、/etc/resolvconf.conf にて制御する。

  • その他
    • インターフェースのメディア設定
    • インターフェースのMTU設定
    • 静的ルーティング設定(クラスレスまたはクラスフル)

DHCPサーバーから送られてくるこれ以外の情報(例えばNTPサーバーの指定など)については標準的には処理されない。

IPv6アドレスをRAで取得する場合

IPv6アドレスをRAで動的に取得する場合、設定は下記の通りとなる。

ifconfig_vtnet0_ipv6="inet6 accept_rtadv"

以下の設定が行われる。

  • 指定したNIC(vtnet0)に対するIPv6アドレス(ifconfig_vtnet0_ipv6 設定相当)

  • デフォルトゲートウェイ(ipv6_defaultrouter 設定相当)

  • DNSキャッシュサーバー情報(/etc/resolv.conf 置き換え)

    • RAを使用する場合 /etc/resolv.conf の事前設定された内容は保証されない(消えることがある)。

    • よってRAで置き換えて欲しくない設定や、足りない設定の付与等については、/etc/resolvconf.conf にて制御する。

RAを受けてDHCP6サーバーからの追加の情報を受信したい場合(例えばNTPサーバーの指定など)については標準的には処理されない。

/tmp/zroot/etc/hostid

ln -sf /bootdir/boot/hostid /tmp/zroot/etc/hostid
chflags -h schg /tmp/zroot/etc/hostid

/tmp/zroot/etc/resolv.conf

nameserver      DNSキャッシュサーバー1
nameserver      DNSキャッシュサーバー2
nameserver      DNSキャッシュサーバー3
options         timeout:2 attempts:5
  • DNSキャッシュサーバーを複数指定する(最低でも2台)。
  • デフォルトのタイムアウト値は5秒、繰り返し回数は2回(サーバー台数×繰り返し回数がリトライ回数となる)なので調整する。
  • 具体的にはタイムアウト値は2秒(最大30秒)、繰り返し回数を5回(最大5回)に設定する。
  • これはDNSキャッシュサーバーの障害に対して早期に回復を図るための設定である。

※/etc/resolv.conf の変更後、デフォルトで2秒以内に反映される(options reload-period:2 相当)。 これはDHCP等によるネームサーバーの変更を、反映させるための設定である。

/tmp/zroot/etc/localtime

tzsetup -s -C /tmp/zroot Asia/Tokyo

/tmp/zroot/etc/ntp.conf

--- /etc/ntp.conf.orig  2021-02-12 15:31:56.000000000 +0900
+++ /etc/ntp.conf       2021-02-22 18:55:21.248244000 +0900
@@ -29,8 +29,11 @@
 #
 # The option `iburst' is used for faster initial synchronization.
 #
-pool 0.freebsd.pool.ntp.org iburst
+pool NTPサーバー iburst

+interface ignore all
+interface listen vtnet0
+
 #
 # If you want to pick yourself which country's public NTP server
 # you want to sync against, comment out the above pool, uncomment
@@ -93,8 +96,8 @@
 # http://support.ntp.org/bin/view/Support/UndisciplinedLocalClock
 # The use of Orphan Mode may be preferable.
 #
-#server 127.127.1.0
-#fudge 127.127.1.0 stratum 10
+server 127.127.1.0
+fudge 127.127.1.0 stratum 10

 # See http://support.ntp.org/bin/view/Support/ConfiguringNTP#Section_6.14.
 # for documentation regarding leapfile. Updates to the file can be obtained
  • 指定されたNTPサーバーが3台以上で「なければ」、追加で pool ntp.nict.jp 行を追加すること。

  • NTPサーバーの台数はIPアドレス単位でカウントするので drill NTPサーバー を実行して、ANSWER SECTION 以下のIPアドレスの個数を数えること。

  • また指定されたサーバーのIPが1つなら、pool ではなく server NTPサーバー と指定してもよい。

  • NTPサーバーは最低でも3台(=3IP)を指定すべき。
  • また複数系統(ストレイタムが違う等)のNTPサーバーを指定する場合は iburst オプションは外した方がよい。

  • ibrust オプションは起動直後に早期に強制時刻同期させることを許すオプションではあるが、NTPサーバーの信頼性をあまり考慮せずに強制同期してしまうため、時間がおかしくなることがある。

/tmp/zroot/etc/ssh/sshd_config

--- /etc/ssh/sshd_config.orig   2021-02-12 15:26:33.000000000 +0900
+++ /etc/ssh/sshd_config        2021-02-22 18:44:31.961963000 +0900
@@ -28,21 +28,21 @@

 # Logging
 #SyslogFacility AUTH
-#LogLevel INFO
+LogLevel VERBOSE

 # Authentication:

 #LoginGraceTime 2m
-#PermitRootLogin no
+PermitRootLogin prohibit-password
 #StrictModes yes
 #MaxAuthTries 6
 #MaxSessions 10

-#PubkeyAuthentication yes
+PubkeyAuthentication yes

 # The default is to check both .ssh/authorized_keys and .ssh/authorized_keys2
 # but this is overridden so installations will only check .ssh/authorized_keys
-AuthorizedKeysFile     .ssh/authorized_keys
+#AuthorizedKeysFile    .ssh/authorized_keys

 #AuthorizedPrincipalsFile none

@@ -58,11 +58,11 @@
 #IgnoreRhosts yes

 # Change to yes to enable built-in password authentication.
-#PasswordAuthentication no
-#PermitEmptyPasswords no
+PasswordAuthentication no
+PermitEmptyPasswords no

 # Change to no to disable PAM authentication
-#ChallengeResponseAuthentication yes
+ChallengeResponseAuthentication no

 # Kerberos options
 #KerberosAuthentication no
@@ -71,8 +71,8 @@
 #KerberosGetAFSToken no

 # GSSAPI options
-#GSSAPIAuthentication no
-#GSSAPICleanupCredentials yes
+GSSAPIAuthentication yes
+GSSAPICleanupCredentials yes

 # Set this to 'no' to disable PAM authentication, account processing,
 # and session processing. If this is enabled, PAM authentication will
@@ -97,9 +97,9 @@
 #TCPKeepAlive yes
 #PermitUserEnvironment no
 #Compression delayed
-#ClientAliveInterval 0
-#ClientAliveCountMax 3
-#UseDNS yes
+ClientAliveInterval 120
+ClientAliveCountMax 30
+UseDNS no
 #PidFile /var/run/sshd.pid
 #MaxStartups 10:30:100
 #PermitTunnel no

/tmp/zroot/root/.ssh/authorized_keys

mkdir -p /tmp/zroot/root/.ssh
# /tmp/zroot/root/.ssh/authorized_keys ファイルを編集 #

authorized_keys ファイルを設置すること。またこの時ネットワークからダウンロードできるようにしておくと便利。
ネットワークに接続して authrized_keys ファイルを取得、設置する場合は下記のような手順となる。

mount -t devfs devfs /tmp/zroot/dev

chroot /tmp/zroot service netif start
chroot /tmp/zroot service routing start
chroot /tmp/zroot fetch -o /root/.ssh/authorized_keys https://....
chroot /tmp/zroot service routing stop
chroot /tmp/zroot service netif stop

umount /tmp/zroot/dev

再起動する

reboot

よくある質問とその答え

Q.SHA-NIに対応したCPUなんてあるんですか?

A.2021年3月現在のIntel製CPUでは下記の状況にある。

  • サーバー用: 現行 Cooper Lake(次の Ice Lake-SP 以降で対応) 
  • デスクトップ用: 現行 Comet Lake(次の Rocket Lake 以降で対応)
  • モバイル用: 現行 Tiger Lake(前の Ice Lake で対応済)
  • 組み込み用: 現行 Tremont(前の Goldmont で対応済)

よって事実上、サーバー・デスクトップ向けでは存在していない。モバイル向けおよび組み込み向けのCPUでのみ対応している状況である。
またAMD製CPUにおいてZENアーキテクチャから対応してるので、RYZENシリーズ(EPICシリーズ)では当たり前に対応してる。

Q.これ全部手で入力するんですか?

A.ここまでコマンドで手順化できてるなら、自動化は難しくない!と思われ。
最初から用意してくれ、という向きがあるかもしれないけど、コードだけ読まされても理解できないなら意味ないし。

クラウド環境だとシングルディスク構成がほとんどだろうから、ここに書いた手順で十分だとは思うけど、 物理環境だとマルチディスク構成を組むとして、どう設計するかは自分で考えないといけないから、
ここでの手順は参考になると思う。どこに何をどう挟み込めばいいのか、という議論はあるけど。

あくまでもFreeBSDをインストールするための基本的な振る舞いを解説したものなので、 インストーラーで完結するならば、ここまでの手順は踏まなくてよい。

何かしら調査が必要になった時の参考にしてもらえればよい。

Q.ZFSパーティションを確保するときの計算式が意味不明です。説明求む!

A.LBAは0から始まるので、次の開始位置は領域のサイズ(の累計)となる。まずこれが前提。
512KB境界は1024ブロック、1MB境界は2048ブロック、1GBは2097152ブロックとなるので、 パーティションの開始位置が各境界のブロックで割った余りが0であることを確認する。

TODO

Q.何故ISOイメージではなくメモリスティックを使わないのですか?

A.メモリスティック、つまりOSからは da0 で見えることになるのですが、これがインストール対象の メディアによっては、da0 で被る場合があり、数字がズレる場合があります(da1 など)。

よってISOイメージの場合 cd0 で認識されることから、明確にインストールメディアとは区別されるため、 積極的に使用しています。

Q.後日のメディア拡張のことを考慮するとスワップパーティションは前の方にあった方がいいのでは?

A.趣味です。完全に惰性なのでOSパーティション(freebsd-ufs)より前に移動することに異存ありません。 BSDパーティション時代では、ルートパーティション(aパーティション)の次に スワップパーティション(bパーティション)が置かれていましたが、
GPTパーティションになって、BSDパーティションを使用しなくなったことから、
ルートパーティションの次に無くてもよいことになりました。
その当時の空気感(?)のまま惰性で割り当てています。

Q.境界にアライメントするなら多少のフリー領域があってもいいのでは? 誤差ではかと

A.趣味です。今時のディスクサイズ(TB単位)を考えるとMB単位の調整は誤差と言えます(1/1000000オーダー)。 なので気にしないなら気にしないでもかまいせん。
自分は gpart show コマンド実行された際にフリー領域の表示が邪魔なので消し込んでいます。

Q.インストール時に kern.geom.label.disk_ident.enable を設定しているけど、loader.conf に指定しない理由は?

A.マウントしているデバイスについてはディスクラベルは表示対象になりません。
インストール時にはまだマウントされないため、gpart show を実行すると二重表示されます。
またディスクラベル、UUID、その他指定可能であっても、デバイス名の指定ほど短く入力できません。
以上から、自分はセットアップ時にディスクラベルを参照しないことにしています。

インストールメディアに依存しないでパーティションを指定できたりするメリットはありますが、
そう思う人が積極的に使用する分にはかまわないと思っています。

参考文献

FreeBSD/FreeBSD13-install (最終更新日時 2021-05-30 15:13:44 更新者 NorikatsuShigemura)