1 Rookie
•
8 メッセージ
0
39
2025年3月25日 06:27
Isilonにおけるユーザの実消費量を計算したい
IsilonのSmart Dedupeを有効にしているクラスタで、重複排除分やパリティ分などを除きユーザが実際にどれくらいの容量を消費しているのか、おおよその予測を計算したいと考えています。
しかし、対象のクラスタのバージョンがv8.2.2.0であるため、"isi status"上に"Data Reduction"の表記がありません。また、現在実機が手元になく、Gatherから取得できた情報で行いたいです。
この際、"dedupe_stats"などから重複排除の比率かパリティ分を除いた計算は可能でしょうか。または、他のログを参照するべきでしょうか。
計算方法をご存じでしたらご教示いただけますと幸いです。
イベントは見つかりませんでした！
ayas
Community Manager
•
7.2K メッセージ
0
2025年3月28日 03:46
Shironnuさん
dedupe_reportsの結果を有難うございます。
正確には出ないですが、Dedupe percent = 8.7331 からDedupされたデータ量が分かり、
その中でどれくらいのデータ排除率があるかによってある程度のUser 使用量が出せると思います。
以下例を挙げてみます。。
物理使用量：100Gだった場合
Dedupe percent→9％
⇒Dedupeされたのは9G分のデータ、残りは91G 分の使用量（ユーザー実消費量）
上記9GでどれだけのデータがDudupeされているか、（１/2の排除率なのか、それとも1/3なのか。。。）排除されていなかったらどれくらいのデータになるのか＝User実消費量と９１G を足せばある程度の目安になるのではないでしょうか。
この排除率はShironnuさんのファイルシステム属性によるので変わってくると思いますが
1/2として考えるとその時点でのUser実消費量は以下の数式で出るかと。
91G ＋ (9G X 2 ) =109 G
ayas
Community Manager
•
7.2K メッセージ
0
2025年3月26日 02:26
Shironnuさん
後述のAdminガイドにもあるようにDeduplication Assessment Reportsなどをしていれば
情報として残りそうです。
Onefs8.1 のログは探せたので確認したところLocalフォルダ配下に「Dedupe_Reports」というファイルがあるはずなのでそちらで確認することは可能でしょうか。
私が入手したDedupe_Reportsは情報が無かったのでShironnuさんの環境で確認していただけると幸いです。こちらでも実機が無い為確認ができず。。。
参考：
OneFS 8.2.2 Web Administration Guide Web Administration Guide
Page 204 Assess deduplication space savings
shironnu
1 Rookie
•
8 メッセージ
0
2025年3月26日 04:00
@ayas
ayasさん
ご返信ありがとうございます。
当該の"dedupe_reports"がGatherの"local"配下にあることを確認できました。
reportによると以下のような検証環境の結果が得られました。
このうちDedupe Percent=Deduped Blocks / Scanned Blocksで求められていることは推測できます。
しかし、これらreportsの値からどのように重複排除を考慮して、ユーザ実消費量を求められるのでしょうか。
ご教示いただけますと幸いです。
以下reportsの内容
-----------------------------------------------------
Results:
Dedupe job report:{
Start time = 20XX-May-19:12:00:00
End time = 20XX-May-20:05:00:00
Iteration count = 2
Scanned blocks = 874955689
Sampled blocks = 27896020
Deduped blocks = 76410747
Dedupe percent = 8.7331
Created dedupe requests = 5949622
Successful dedupe requests = 4779469
Unsuccessful dedupe requests = 1170153
Skipped files = 21028501
Previously assessed files = 0
Index entries = 1294877025
Index lookup attempts = 2487346892
Index lookup hits = 1618372423
}