玩轉Freenas系統02——淺談ZFS,Vdev,池,陣列(催眠警告)

司波图
6粉絲
37 次觀看·2024年11月2日
本期視頻給大家介紹一下freenas的文件系ZFS里的池與Vdev與陣列之間的關係。
Freenas基礎安裝及基本共享設置:
av63317880
大家想了解虛擬機可點下面:
av57463528(4-8盤位虛擬機NAS硬件選擇)
av57096310(虛擬機硬件選擇導讀)
大家如果想學如何安裝軟路由的話可以點下面鏈接:
av56156408(為甚麼使用軟路由,如何選擇軟路由需要的硬件)
av56392615(在X86主機上安裝LEDE軟路由系統)
聯繫郵箱:[email protected]
大家好
我是你們高產的小夥伴縮圖
上一個視頻阿卜杜也是講了一下
FreeNAS的安裝
還有在FreeNAS裏面創建
創造池
還有一些關於共享的一個設置
當然說的沒有特別詳細
對FreeNAS的安裝有興趣的
小夥伴也可以看一下上一個視頻
上一個視頻關於這些功能來說
我們都沒有進行一個非常詳細的介紹
只是讓大家可以及時的玩起來
今天的話我們就會對FreeNAS的
一個大亮點
ZFS的一個文件系統進行一個
較爲詳細的一個介紹
雖然說是較爲詳細
但實際上也只是一個淺談
基本上就是一些入門用戶
可能會使用到的一些功能
關於一些詳細的ZFS的技術
是相當複雜的
大家也可以自己去查一些資料
我們就讓大家先用起來
OK
那我們就開始今天的一個視頻
首先我們還是來講一下
什麼是FreeNAS裏面一個池的概念
這個池的概念
大家可以想象成
Windows裏面一個分區的概念
在很多的NAS系統裏面
我們會接觸到這個池的概念
實際上大家可以理解成
創建了一個池
就等於在我們FreeNAS的
一個文件系統裏面
創建了一個
以這個池爲名的一個路徑
像在上一個視頻裏面
我們就創建了一個
只有一個硬盤的池
假設我們將這個池
命名爲MyStorage
實際上它就在我們文件系統裏面
MNT的一個目錄裏面
建立了一個MyStorage的一個目錄
我們也叫這個目錄
叫一個Dataset
叫數據集
我們將這個目錄
設爲共享之後
實際上我們往這個目錄裏面
寫文件的話
就等於在往這個池裏面寫文件
如果像上一集
我們這個池裏面
只有一塊硬盤的話
等於我們就是直接
再往硬盤裏面寫文件了
上一集這個內容
實際上很容易理解
但是實際上我們這個池
並不是由硬盤組成的
而是一個叫VDEV的
一個東西組成的
到底什麼是VDEV
我們就回到FreeNAS的
一個創建頁面
我們來看一下
那阿波主在這裏
也是創建一臺
有這個9個硬盤的
一個FreeNAS的虛擬機
然後給大家講一下
這個池的一個結構
那我們進到這個Create Pool
也就是這個創建池的
一個界面
我們把這個池
命名爲這個MyStorage
然後這裏可以看到
有9個這個硬盤
給我們備選
然後默認的話
它會給你一個
這個DataVDEV
也就是這個數據VDEV的
一個框架
那實際上我們這裏是
下面有一些按鈕
有這個AddData
AddCache
AddLock
AddSpare
有4種的這個VDEV
我們可以添加
實際上這個DataVDEV
我們不只可以有一個
我們還可以有兩個
那我們首先講一下
後面這幾個
因爲後面這幾個
我們這一節課
不會詳細講
第一個是這個
緩存的一個VDEV
也是用來加快
我們這個池的一個
讀取速度的一個VDEV
第二個是這個記錄VDEV
是用來加快
我們對這個池的
一個寫入速度的一個VDEV
後面是一個這個Spare
也就是一個熱背盤的
一個VDEV
實際上是爲了
我們這裏有設備損壞的時候
及時把這個設備
替換上去的一個VDEV
實際上前面兩種
緩存的一個設備
在我們日常使用中
可能是比較少用到的
實際上在日常使用中
它的一個激活的一個方式
會比較複雜
一般來說
我們是用這個
NVMe的一個設備
來做這個緩存的
大家也可以具體去查一下資料
如果有機會的話
我會在後面的視頻講一下
那這個熱背的設備
實際上就更加簡單了
大家可以自己去了解了
那我們今天主要要說的是
數據的一個VDEV
不知道大家還記不記得上一集
我們實際上是
在一個VDEV裏面
加了一個磁盤
這樣我們就組成了
我們一個基本的一個磁
實際上我們可以在一個VDEV裏面
加多個磁盤
然後組成陣列來組成這個VDEV
實際上這個VDEV
大家可以理解成是一個磁盤
或者是由多個磁盤組成的陣列
組成的一個虛擬設備
VDEV實際上就是
Visual Device的一個簡寫
它也是非常好理解的一個東西
實際上一個磁
它至少會要有一個VDEV
也就是說我們要有一塊
用來儲存這個容量
每個VDEV有它的一個可靠性
和這個總容量
然後我們來具體講一下
它有幾種這個陣列
我們來介紹一下
這個VDEV各種形態
最簡單的VDEV
就是一個硬盤
實際上它是沒有這個容易的
然後它只要有這個數據損失的話
就是單個的一個數據損失
並沒有什麼好講
實際上它就類似我們這個羣暉裏面的
這個Basic的一個模式
當我們有兩塊硬盤的時候
它實際上就可以有不同的一個
組成陣列的一個方式了
它可以用這個條帶式的一個方式
也可以用這個Mirror的一個
叫做這個鏡像式的一個陣列方式
條帶式的這個方式
實際上就跟我們這個RAID0
是非常相近的
它是把這個數據
同時的向兩塊硬盤裏面寫入
然後最後讀取的時候
也是將兩塊硬盤裏面
數據組合來讀取
然後這種組成方式
實際上我們壞一塊硬盤
就等於我們把所有的一個數據丟失了
是一種風險很高的一個方式
它可以增強我們整體的一個
磁盤的一個IO性能
但是在這個ZFS裏面
條帶式的一個存儲方式
跟我們一般的一個RAID0
又有點不一樣
在我們一般的RAID0裏面
實際上它會要求我們兩塊硬盤的
一個容量相等
如果兩塊硬盤容量不相等的話
實際上它會以最低的一個容量
舉個例子
就是說如果我們是一塊ET的硬盤
和一塊500G的硬盤
它組成的RAID0
實際上它的一個總容量
只有500G乘以2的一個容量
它會以我們最低容量
這塊500G的一個硬盤
爲基礎的一個容量
因爲RAID0實際上是
像兩塊硬盤
同時寫入相同容量的一個數據
所以說如果你這兩塊硬盤
不是一樣大小的話
它一塊硬盤寫滿了之後
實際上你另外一塊硬盤有容量
它也沒辦法進行
兩塊硬盤同時寫入的一個操作了
但是在ZFS的一個條帶式的
一個寫入方式裏面
如果你是有兩塊硬盤容量
不一樣的磁盤的話
它組成的條帶式的陣列
它的總容量實際上是等於
你這兩塊硬盤的一個容量
直接相加的一個容量
我們還是以1T的硬盤
和500G的硬盤爲例
這兩個硬盤組成的ZFS的
一個條帶式的陣列的話
它的總容量是1.5T的一個容量
但是它運作方式
跟RAID0就不一樣了
它前面的1T的容量
實際上是同時像兩塊硬盤
寫入這500G的容量
然後在後面的500G的容量
它也不會浪費
它會直接向500G裏面
寫入這個內容
也就是說它會充分的利用
條帶式的陣列裏面的一個空間
這個比RAID0就有一些優勢了
我們也可以進行一個演示
OK 我們來到另外一臺
FreeNAS的一個主機
這是我們上一個視頻裏面
創建的蝸牛星際裏面的FreeNAS
我們來創建一個池
我們點add
然後這裏現在有4塊硬盤
我們用到這裏面其中兩塊
有一塊500G的一個機械硬盤
和一塊120G的一個固態硬盤
我們怎麼來組成VDEF
實際上我們是可以用
兩塊不同容量的一個硬盤
來組成條帶式的一個陣列
當然它這裏會警告我們
不同大小的一個磁盤組成的
VDEF是不被推薦的
實際上確實也是這樣
大家如果是真的要建立
這種條帶式的一個陣列的話
建議大家還是用同樣的一個硬盤
除了條帶式的一個陣列以外
實際上任何的一個陣列
我們都是建議大家用同樣型號
同樣容量的一個磁盤來組成的
實際上現在這種情況
也只是給大家做一個演示
並不是非常推薦
這裏大家可以看到在Data VDEF
這裏就有兩塊不同容量的硬盤在裏面了
然後實際上它組成的總容量是573G
實際上大家如果在羣暉裏面
創建這種不同容量的一個磁盤
組成的RAID0
它的總容量實際上是應該等於
最低容量的這塊硬盤的一個容量乘以2的
也就是說應該是200多G的
這裏的話它可以用到570多G
也就是說這裏是可以體現
這個Stripe這種模式
和這個RAID0裏面的一個區別的
我們在這裏設置一個名字
我們來看一下它的一個寫入狀態
我們叫這個MySpace
然後我們點擊Create
我們這裏還是強調一下
這種一個創建模式是不太推薦的
大家儘量還是用同樣的一個容量的
一個設備來組成陣列
OK我們現在就拷貝一個
目錄到我們MySpace這個磁裏面
我們來複制粘貼
OK這邊寫入速度是非常穩定的
這裏的話我們可以看一下
這兩個磁盤的一個寫入速度的一個區別
我們回到這裏
然後我們點擊這裏有個Disk
我們現在是3號磁盤和4號磁盤
在進行一個寫入
我們就來看一下
實際可以看到我們這3號磁盤
寫入速度在50到30之間
實際上這也是由於進行了一個壓縮
它的總寫入量不會達到100兆
然後我們看下面這個硬盤
實際上這兩個硬盤的一個寫入速度
是非常接近的
可以看到這裏有一個寫入的一個曲線
我們這裏這個寫入曲線
也是基本上一致的
也就是說實際上
現在我們兩塊硬盤的一個寫入速度
是基本上是一致的
就是說我們還處於RAID0的一個狀態
當實際上當固態的一個硬盤寫滿了之後
實際上它就會單獨向這塊
500G的一個機械硬盤裏面寫入數據了
但是由於我們網速實際上
整體的一個寫入集數只有113M
所以說它實際上機械硬盤的一個速度
也不會造成一個瓶頸
這裏實際上也是體現不出來
它這個速度降低了
OK我們大概就進行一個
這樣的一個概念講解
實際上stripe這個陣列
我們是不會經常用到的
因爲它是沒有榮譽性的
只要stripe這個陣列裏面
有一塊硬盤掛掉的話
我們整個陣列裏面的一個數據都會丟失
但是stripe又涉及到我們後面
一個比較重要的一個概念
所以說我們還是詳細講了一下
因爲我們將來多個VDEF存在的情況下
實際上VDEF之間的關係
是stripe的一個關係
我們可以後面再來聊
OK我們stripe這個概念
我們就基本上講到這裏
我們再回到之前
我們虛擬機裏面
這臺FreeNAS的一個創建界面
這個stripe講完之後
我們要講第二個比較重要的
就是這個MIRROR的一個陣列
這個MIRROR的陣列實際上也很簡單
MIRROR實際上就跟我們RAID1
基本上是一模一樣的
這裏的話大家可以看到
我們現在實際上每個10G的硬盤
它的一個總容量是8G
因爲它會有一定的一個損耗
這個小硬盤損耗都會比較大一點
我們兩塊硬盤
實際上以stripe陣列的形式存在的話
實際上它的總容量是16G
但是我們以MIRROR存在的話
它就只有這個8G的一個容量了
那這個RAID1大家應該也是知道的
就是說我們在向這個陣列裏面
寫入這個數據的時候
實際上它是從事寫入到我們這個
陣列裏面每一塊硬盤裏面的
而且每一塊硬盤裏面
內容是一模一樣的
也就是說我們在這個陣列裏面
無論壞哪一塊硬盤
它的另外一塊硬盤都會直接頂上
那實際上這個MIRROR這個陣列
我們不止可以用兩塊硬盤來組成
我們甚至可以用三塊
甚至可以用四塊
但是實際上它的一個總容量
都是由這個陣列裏面
最低容量的一塊硬盤來決定的
也就是說即使我們其他硬盤
有這個1T的容量
實際上它也是由我們最低的
這塊10G的這塊硬盤
來決定它的一個陣列總容量的
然後每塊硬盤
實際上它的內容是一模一樣的
也就是說我們這四塊硬盤
組成這個VDEF
只要我們有一塊是可以存活的話
這個VDEF都不會有任何的一個數據
丟失
那這個也是非常簡單
然後後面就是這個RAIDZ
還有這個RAIDZ2
實際上這個RAIDZ
跟我們這個RAID5
又是非常接近的
它會用一塊硬盤的容量
來做這個校驗
我們簡單來說一下
這個RAID5的一個概念
實際上RAID5的概念
就是等於是用一塊硬盤的
一個容量來做一個容餘
它怎麼樣來實現這個容餘
它實際上是用了一個
這個校驗的數據
我們來看一下這張圖
我們這張圖裏面
我們假設有四塊硬盤
然後大家也知道這個數據
實際上是由這個二進制的
這個0和1來組成的
假設我們現在有12個
這個0或者1組成的一個數據
那可能是這個01010101010101
這樣的一串數據
它一共有12個0和1
那實際上我們就可以
以這個三個爲一組的這種方式
寫入到我們這個RAID5的陣列裏面
那我們既然是以三個爲一組的話
我們就會在其中三個磁盤裏面
反正是以實際爲準
然後我們還剩一個磁盤
還沒有寫對不對
這個磁盤的這個格
我們就來寫入這個
前面的數據計算出來的一個奇偶值
那我們偶數就是0
奇數就是1對不對
也是隻有兩種選擇
那我們如果是101的話
我們現在在後面這個數據
我們就寫是0
然後我們是100的話
它是一個奇數
那我們後面這個數據就寫1
那實際上這樣的一個情況的話
我們無論是任何一個磁盤壞掉的話
我們都可以通過其他的三個數
來計算出我們另外一個數
應該爲哪一個數
所以說我們壞掉一個磁盤的話
我們可以推算出這個磁盤裏面
所有的一個數據
所以說我們在壞掉磁盤的情況下
我們是不會丟失數據的
那我們舉個例子
那我們如果是前三個數是101
這三個數算出來是一個偶數
那我們這個校驗的值應該是0
對不對
1010
那我們磁盤2如果是壞掉的話
我們前面兩個數字是10
然後我們這個校驗這個數是0
那前面兩個數加起來實際上是奇數
然後後面這個是0的話
那如果我們這塊磁盤壞掉的話
實際上我們是可以推算出
這塊磁盤這一個值是1的
也就是說所有的這些值的話
我們都可以通過反向推算的方式
來推算出來
那我們在替換這個硬盤的一個過程
實際上就叫做這個rebuild重建
大家實際上也可能聽過這個rebuild
是一個非常可怕的一個詞
它的一個重建過程
實際上是一個非常長的過程
而且硬盤越多的話
它的一個重建過程會越長
所以說大家還是儘量不要壞
實際上在這個重建過程中
你的讀寫量也是非常大的
你也很有可能會壞掉第二塊硬盤
這也是有相當大的一個風險的
實際上這種v5
也不是說非常安全的一種方式
因爲它一旦壞兩塊硬盤的話
你這整一串的數據就全部被毀滅掉了
OK
那我們說完這個RAID5的一個
校驗方式之後
我們又來說一下它的性能
實際上這個RAID5
它對比這個RAID0來說
雖然是比不上
但是它實際上還是一種
讀寫效率非常高的一種
這個鎮店模式
那在這個4塊硬盤的一個情況下
RAID0實際上是同時
向4塊硬盤寫入數據
那這個RAID5的情況下
它會騰出一塊盤來做這個校驗盤
它是沒有這個數據存儲功能的
實際上它也是同時向
這個3塊磁盤在寫入這個數據
所以說它的一個寫入速度
實際上是這3塊磁盤的一個速度總和
它的速度也是非常OK的
那說完速度
我們又來說一下空間了
那大家聽完這個校驗的一個方式
實際上也應該理解
就是說我們有一個硬盤的容量
用來做這個榮譽的話
實際上我們還有3塊硬盤的
一個存儲空間可以使用
那這裏的話實際上就是
n塊硬盤組成的這個RAID5的一個空間
實際上它的空間就等於
n-1塊硬盤的一個空間
那這個RAID5就沒辦法像這個條帶式
做到這麼靈活的一個空間調配了
它會以這個
它會以這個最低容量的這個磁盤
爲這個基準
然後來乘以它的一個係數
那我們再重新看回這個
FreeNAS的一個界面
那大家這裏可以看到
我們以這個實際只有8G的這個
存儲的一個硬盤組成的這個RAIDZ
也就是RAID5的話
它實際的容量
也就是這個24G的一個容量
它實際上是這個
3塊這個8G的容量的總和
有一塊硬盤的容量
用來做了這個校驗
那實際上雖然說這個RAID5
有一定的這個校驗的一個機制
但實際上它壞兩塊硬盤
就等於你整塊這個陣列就毀滅掉了
它並不是一種非常安全的一個方式
它應該是一種兼顧了這個空間統一性
還有一個讀寫性能
還有這個
還有一個兼顧了這個容量的一種
非常均衡的一種陣列吧
反正大家是可以按照自己的需求
來選擇這個RAID5吧
那這個RAIDZ2的一個方式
實際上就跟這個RAID6
是基本上差不多了
就是說它實際上是用兩塊硬盤
來做這個榮譽
在這種RAIDZ2的一個情況下
大家可以壞這個兩塊硬盤
而不丟失這個數據
那在這個硬盤比較多的情況下
大家可以使用這種
但實際上在這種硬盤
較少的情況下
你用這種RAIDZ2的一個形式的話
實際上並不是一種非常聰明的方式
因爲你的一個空間的一個損失
會非常高
像四塊硬盤的話
你就損失到兩塊硬盤的一個容量
也是非常不划算
那如果我們是在用比較多的一個硬盤
組成這個RAIDZ2的話
就會比較划算了
因爲我們只有在
壞三塊硬盤的情況下
纔會損失掉我們所有的一個內容
所以說這種概率上也是非常小的
而且我們也是可以
在壞掉一塊硬盤的情況下
馬上進行這個重建
來恢復到這個RAIDZ2的一個狀態
所以說RAIDZ2
我覺得是一種非常安全的一種方式
也是非常划算的
然後這個ZF系統
還提供一種RAIDZ3的一個方式
實際上是又加了一塊硬盤的一個榮譽
也就是說它可以壞三塊硬盤不丟失數據
那這個的話
我們就不做另外的一個討論了
因爲我們家用的話
都會用的比較少
那現在來看的話
我們就大概清楚了
所有的一個陣列的一個方式
那我們在瞭解了
這個VDEF一個陣列組成之後
我們就要來看多個VDEF的一個場景了
那一般來說實際上
我們家用上是
不會用到這個多個VDEF的
只有在我們超過了這個10個硬盤的情況下
我們纔會用到多個VDEF
因爲我們一般來說
像這個9個硬盤的話
我們都可以用這個RAIDZ3
來保證我們的一個數據的安全
但實際上
你如果是超過了
這樣的一個數量的話
你整體的一個重建時間就會非常長
因爲這個校驗的時間
是以你的硬件的一個數量
爲考量的
如果是你的硬盤越多的話
你的重建時間會越長
如果大家建立一個20個硬盤
組成的RAIDZ3的話
實際上無論是從安全性
還是從重建的時間來看
都是非常不合適的
因爲你20個硬盤來說
換3個4個並不是一個
非常小概率的一個事件
所以說我們就會用到一個
多個VDEF的一個組合
我們來看回我們的概念圖
實際上我們這裏概念圖也看到了
我們實際上一個池裏面
是可以存在多個VDEF的
VDEF之間是什麼樣的一個關係
那沒錯
實際上VDEF之間
是以條帶式的一個關係來存在的
條帶式的關係
就跟我們之前說的硬盤之間
條帶式的一個關係是一樣的
只要我們壞了其中一個VDEF的話
我們這整個池的一個數據就會丟失
那我們舉個例子來看一下
那首先我們現在這裏有9個
8G實際容量的一個硬盤在這裏
那我們現在要組成兩個VDEF
來組成這個存儲池
那我們怎麼來存儲
那我們怎麼來組成呢
那首先是這樣的
那我們現在可以這樣組成
我們先拿4個硬盤組成第一個VDEF
然後這個VDEF
我們用RAID-Z的一個形式組成陣列
這個陣列我們可以算出來
它的一個總容量是24G
也就是說我們實際的容量是
3個8G的硬盤的容量
也就是說24G的容量
那這樣的話我們又可以加一個
新的一個Data VDEF
然後我們再把這三個硬盤組成
加入到我們第二個這個VDEF裏面
那這裏可以看到
我們如果是選這個RAID-ZR的話
它會提示我們
那這裏我們可以看到一排
這個紅字的一個警告
那實際上它這裏就是告訴我們
我們VDEF之間
是不能以不同的一個陣列組成的
也就是說我們第一個陣列
是這個RAID-Z
第二個VDEF這個RAID-ZR的話
它是不能組成同樣一個池的
也就是說我們要把這個
第二個VDEF改成這個RAID-Z
那我們可以看到
第一個VDEF的一個容量是24G
第二個VDEF的一個容量是24G
那我們這個池的一個總容量
實際上就是這個48G
也就是說實際上這兩個VDEF
它是以一個條帶式的
一個方式存在的
如果我們這些池都是以一個
Stripe的一個形式來存在的話
那實際上這個池的一個風險有多大
我們只要壞一個硬盤
實際上那我們整個這個池的
一個數據就崩潰了
那當我們兩個VDEF
都是以這個RAID-Z
那這種情況下
實際上我們每個VDEF
都是有一個盤作爲這個榮譽的
那只有當我們其中一個VDEF
壞了兩塊硬盤的話
這整個池的一個數據纔會被損壞
那實際上我們要了解的就是說
在我們一個池裏面
有多個VDEF存在的話
實際上這種VDEF的一個關係
是這種條帶式的關係
只要我們有一個VDEF損壞的話
那我們一個池的數據都會被損壞
然後這個VDEF的一個安全性
就由它VDEF裏面
選用的一個陣列來決定
那實際上我們在這個硬盤
較小的情況下
完全不需要用到這個多個VDEF
實際上你像我
如果是有8個硬盤的話
那實際上我們都是可以用到
這個RAID-Z2或者是RAID-Z3
來保證這個數據的一個安全
都是沒有問題的
只有當我們這個硬盤
非常多的情況下
我們才需要用到多個VDEF
因爲我們分多個VDEF的話
我們哪個VDEF
都可以受到這個陣列的保護
所以說我們可以設非常多的
一個榮譽的一個陣列盤
OK
那我們這一部分
這個硬盤創建的部分
我們基本就說到這裏
那實際上
在我們創建了這個池以後
我們又會涉及到一個
叫做數據集和這個Z4的東西
那我們來看一下
這個我們實際使用中
數據集和Z4是什麼東西
這個是我自己在使用的一個陣列
是一個8個盤的一個
實際在用的一個陣列
它的總容量應該是14T左右
然後這裏面會有一些
Dataset的一個叫做數據集的東西
實際上你在創建了池以後
它就默認會創建一個數據集
實際上大家可以理解成目錄就行了
並沒有這麼複雜的一個東西
但每一個數據集
實際上它可以單獨設置
這種壓縮的一個方式
還有一些功能
這個ZFS的一個功能的開啓和關閉
那這些具體關於這個ZFS的一些功能
我們在後面再說
然後它還有一個叫做
這個Z4的一個快撞存儲的一個功能
就等於說它可以直接在你的陣列裏面
開啓一個快撞的一個10G
或者是20G一個連續的一個空間
來做這個ice gas的一個共享
那我覺得今天的內容
可能大家聽起來都會有點暈
所以說我覺得一些關於這個ZFS
一些具體的功能的一些介紹
我們就下一個視頻再來說
OK
那我們今天又是催眠的一集
喜歡這個視頻的不妨關注一波
那我們下個視頻再見
拜拜
