Nopmine

2026/09/18

NO 08:20 鯖缶 機能 #1205: NVMe/TCP のためのネットワーク構成再考 (2026-09)

nop_thread さんは #note-1 で書きました:
> 分離しても大してメリットはない気がするので VLAN も (`chuable-ceph` という名前は変えたうえで) 共用にするのが良い気はしている。
`storage-backbone` という名前に変更する。 nop_thread

NO 08:17 鯖缶 機能 #1205: NVMe/TCP のためのネットワーク構成再考 (2026-09)

* PVE の典型例
+ RJ45 (1GbE〜10GbE), オンボード: mgmt VLAN
+ (もうひとつ RJ45 が生えている場合もあるが、全てのノードでそうというわけではないので活用できていない。)
+ SFP+ (10GbE) ×2, PCIe NIC
- 一方は backbone VLAN, lab VLAN, intsvc VLAN 向け
- もう一方は chuable-ceph VL... nop_thread

NO 08:11 鯖缶 機能 #1205 (新規): NVMe/TCP のためのネットワーク構成再考 (2026-09)

Proxmox VE 上で動かしている Ceph については2口 SFP+ の NIC のうち1口を占有して独立した VLAN に逃がしているが、 ##1204 でセットアップしようとしている NVMe/TCP については独立した VLAN を用意できていない。
また、 kanade (TrueNAS) 側でも現状では管理 VLAN とデスクトップ端末向け含む通常用途のネットワークにしか参加していない。
さすがに NVMe/TCP のトラフィックをアプリ向けと同... nop_thread

NO 08:03 鯖缶 機能 #1204: TrueNAS Proxmox VE Storage Plugin をセットアップする

ネットワークインターフェースと VLAN を分離するかどうかが悩みどころ。
現状で十分に大きな帯域のあるインターフェースは、大別してアプリによる通信用 (サービス間通信含む) と Ceph 用 (PVE のノード間でしか通信しない) の2つだけがある。
一方 kanade (TrueNAS) 側では NIC を1枚しか増設できない都合と可用性を確保したいという気持ちで、増設 NIC から生えている SFP+ の2口を LACP で束ねて使っており、 RJ45 の2口の... nop_thread

NO 06:52 鯖缶 機能 #1204: TrueNAS Proxmox VE Storage Plugin をセットアップする

NVMe/TCP の認証 (DH-CHAP) については PVE の各ノードでセットアップが必要そう。
[truenas-proxmox-plugin/wiki/NVMe-Setup.md at 8b1c93876cb1beba2cc418026934489f7f02abad · truenas/truenas-proxmox-plugin](https://github.com/truenas/truenas-proxmox-plugin/blob/8b1c9387... nop_thread

NO 06:48 鯖缶 機能 #1204: TrueNAS Proxmox VE Storage Plugin をセットアップする

Proxmox VE へのインストールは apt でできるようなので、 ansible でセットアップできそう。
https://github.com/truenas/truenas-proxmox-plugin/blob/8b1c93876cb1beba2cc418026934489f7f02abad/README.md?plain=1#L74-L90
> Manual deb822 source setup:
> ...
> ``` nop_thread

NO 06:36 鯖缶 機能 #1204 (進行中): TrueNAS Proxmox VE Storage Plugin をセットアップする

* [Proxmox VE Storage Plugin | TrueNAS Documentation Hub](https://www.truenas.com/docs/solutions/integrations/proxmoxplugin/)
+ [truenas/truenas-proxmox-plugin: For providing seamless block storage to PVE](https://github.com/truenas... nop_thread

NO 06:32 鯖缶 機能 #1137: chuable 向けの S3 互換オブジェクトストレージサーバを立てる

TrueNAS の Apps から Garage を立てるのも試そうとしたが、 web UI (garage-ui) を HTTPS 化するのが面倒になりそうだったのでやめた。
具体的には、まず Garage の web UI が HTTP なので、自宅 CA から証明書を取得・更新させて HTTPS 化しようとしたらリバースプロキシが必要になる。
(長期間の証明書を手作業で作ればどうにかなるのかもしれないが、そんなことはしたくないので最初から調べていない。)
... nop_thread

NO 06:20 鯖缶 機能 #1137: chuable 向けの S3 互換オブジェクトストレージサーバを立てる

Garage の `data_dir` は、公式にサポートはしていないながら、リモートの FS に置くことができるようだ。
[#986 - Can Garage work with NFS-backed storage? - Deuxfleurs/garage - Forge Deuxfleurs](https://git.deuxfleurs.fr/Deuxfleurs/garage/issues/986#issuecomment-12130)
> Fun... nop_thread

NO 06:10 鯖缶 機能 #1137: chuable 向けの S3 互換オブジェクトストレージサーバを立てる

iSCSI vs. NVMe/TCP については、 NVMe/TCP 一択っぽい。
* [iSCSI vs NVMe-oF: Performance Comparison](https://www.starwindsoftware.com/blog/iscsi-vs-nvme-of-performance-comparison/)
* [PROXMOX: ISCSI and NVMe/TCP SHARED STORAGE COMPARISON | Blockbr... nop_thread