在 Ubuntu/Debian 安裝 NFS Ganesha 取代 NFS-kernel service
- 因為詢問 ChatGPT 是否有提升 NFS 服務效能的輔助軟體, 結果給了這答案:
使用 NFS 緩存 : 某些軟體和硬體方案提供 NFS 緩存,可減少對伺服器的存取,提升效能。這些緩存可以是軟體層面的,例如 nfs-ganesha 或硬體層面的存儲緩存。 - 也看到預設 Ubuntu/Debian 可透過 apt 直接安裝, 門檻很低就直接安裝測試
安裝與設定方式
- 安裝程序
sudo apt update sudo apt install nfs-ganesha nfs-ganesha-vfs
- 設定 nfs 分享目錄 Exp. /nfsshare 可讀寫, 只允許 10.20.0.0/22 這網段的用戶存取
vi /etc/ganesha/ganesha.conf
EXPORT { Export_ID = 1; Path = /nfsshare; Pseudo = /nfsshare; Access_Type = RW; Squash = No_Root_Squash; FSAL { Name = VFS; } Clients = 10.20.0.0/22; }
- 設定啟動 nfs-ganesha 服務
sudo systemctl restart nfs-ganesha sudo systemctl enable nfs-ganesha
- 查詢服務狀態
sudo systemctl status nfs-ganesha
- 如果服務狀態不是完全正常
- 確認是否原本的 nfs-kernel service 還沒關閉, 關閉方式如下:
sudo systemctl stop nfs-kernel-server sudo systemctl disable nfs-kernel-server
- 查詢 log 了解問題發生的原因: Exp.
tail -100 /var/log/ganesha/ganesha.log
進階調教
- 調整自訂記憶體當 Cache
- Mem_Max 預設可能是 64 MB 調高至 2048 MB → Mem_Max = 2147483648
- Mem_Cache_Size 預設可能是 32 MB 調高至 512 MB → Mem_Cache_Size = 536870912
- Dir_MaxCacheSize 預設可能是 512 KB 調高至 4096 KB → Dir_MaxCacheSize = 4194304
- 將設定加入 ganesha.conf 內
vi /etc/ganesha/ganesha.conf
NFS_Core_Param { Mem_Max = 2147483648; Mem_Cache_Size = 536870912; Dir_MaxCacheSize = 4194304; } EXPORT :
- 重啟 nfs-ganesha 服務讓設定生效
systemctl restart nfs-ganesha
- 使用 fio 來驗證調教後效能提升大概 18%
- 調教前 看完整測試資料
Run status group 0 (all jobs): READ: bw=1637KiB/s (1676kB/s), 1637KiB/s-1637KiB/s (1676kB/s-1676kB/s), io=192MiB (202MB), run=120272-120272msec WRITE: bw=1637KiB/s (1677kB/s), 1637KiB/s-1637KiB/s (1677kB/s-1677kB/s), io=192MiB (202MB), run=120360-120360msec
- 調教後 看完整測試資料
Run status group 0 (all jobs): READ: bw=1935KiB/s (1981kB/s), 1935KiB/s-1935KiB/s (1981kB/s-1981kB/s), io=228MiB (239MB), run=120434-120434msec WRITE: bw=1953KiB/s (2000kB/s), 1953KiB/s-1953KiB/s (2000kB/s-2000kB/s), io=230MiB (241MB), run=120500-120500msec