[NETGEAR] ReadyNAS総合 Part44 [X-RAID/RAIDiator]
レス数が1000を超えています。これ以上書き込みはできません。
うーん 実際のところはよく分からんのだよねー 資料があれば良いのだけど 各社のスクラブ機能ってのがビット腐敗対策
毎月1回スケジュール化しておくのが定番
ReadyNASのBitRot保護はデータへのアクセス時に自動的に腐敗チェックと修復するから
ビット腐敗したデータのコピーを防げるのが利点なのかな
他のメーカーでもスクラブ直後にデータ移動すれば天文学的確率でしかエラーにはならない
大昔の2〜4GBのHDD時代にはビット腐敗は頻繁にあったけど、120GB時代あたりからまず経験したことない >>953
>大昔の2〜4GBのHDD時代にはビット腐敗は頻繁にあったけど、
80MB くらいのころから使ってるが、エラーにもならず化けたデータが読み出されることなんてまずねーよw エラー訂正は置いといて、エラー検出がすり抜ける確率は検出符号長 X だとすると 2^-X。
何故なら検出符号が取る値は 2^X 通りしか無いので、あらゆるデータの検出符号値はそのうちのひとつになり、その値の出現率で衝突するから。
これを踏まえると、エラー検出訂正についても結局はその符号長 X に対する 2^-X の確率で訂正も検出もできず、化けがすり抜けることになる。
一般のHDDのエラー率は 10^-14 ほどらしいので、エラー検出するだけでも X は 50bit あるはず。
となると、エラーをすり抜ける率はバッドブロックが出る確率の 100兆分の1 より小さいってことになる。
大規模データセンターでバッドブロックが100兆個出るくらいのスパンで運用したら、データ化けに遭遇するだろうね。 もちろん確率の問題だから、100兆に1個の大当たりが一発目で出ることもあるだろうけどね。
だから bit rot 検出は有効なんじゃね? 一番起こりえそうな1ビット反転だと衝突しないアルゴリズムにはなっているから
実際にはもっとオーダちがうだろうけど確かにゼロではない
そこまでいくとスクラブ直後に化ける考慮はどうなの?ってことになるし
性能犠牲にして透過的に読み出し時やってくれるオプションでいい気がする bit rot 保護ってのが、HDD内のエラー訂正の状況をモニタリングして、訂正はできてるがエラー率が増えてるブロックを置き換えるということなら、それってHDD自身がやってることなんだよね。
んで外からの通常のデータアクセスじゃブロックごとのエラー率なんて分からず、総括が SMART から見られるくらいだよね。
だから bit rot 保護なんて言ってるけど、具体的に何を想定したものなのかがよく分からないのよね。
OS のディスクキャッシュとか RAID のバッファをフラッシュし損ねたデータ破損をリカバリできるようなものとも思えないし。 ReadyNAS OS 6.xのソフトウェアマニュアルでBit Rot保護の説明を見ると、
ディスク上の古くなったデータを書き直してデータの信頼性を復元するとある。
ただし、ディスクへ書き込んだ時刻やディスク上のデータの状態を監視している
のではなく、btrfsのチェックサムやディスクのリードでのエラーをトリガーに
動作していると思う。 ReadyNASにもディスクスクラブ機能はあるので
BitRot保護機能とはデータにアクセスした時にそのデータ単品のエラービットの確認と訂正、ビット腐敗予防に再書き込みしておく機能と思っている
>>954
HDDに保存していた画像データを久々に開こうとしたら壊れて表示されない経験位はあるでしょ?
win95時代はCDからのコピーインストールが多かったけど、久々に起動しようとしてアプリがエラーするので再インストで直すとかよくあった >>961
>HDDに保存していた画像データを久々に開こうとしたら壊れて表示されない経験位はあるでしょ?
お前があると言うならそれは否定しないけど、正直言って無いし、フロッピーですら無い。
もちろんエラーが出る経験はあるけど、読み取りエラーにもならずに化けたデータが読み出されるの?
フラッシュメモリなら聞くけどあれはエラー検出が実質無いコントローラの話で、パナの 4MB の SDカードでもきちんとエラーになったよ。
どんな化け方してたのかはすごく興味あるな。
ちょっとだけ違うなんてことはなく、盛大に違ってないと CRC は合わないだろうし。
自分ならファイルをダンプして調べてたな。 HDDに保存してたJPEGファイルのうちごく一部だけど中身が化けたのか
下半分がグレー1色になって潰れてたファイルがあったな(上半分は正常)
今思えばあれもビット腐敗だったのだろうか ずっと接続せずに保管しておいたHDDでなければ、データがHDD内で化けたのか、
HDDは正常だが想定外のデータが上書きされたのか、区別できないはず 元々壊れた画像だったけどダウンロード時点ではよく見てなくて気付かなかったとか、
ビュワーが変わって壊れた画像の表示具合が違って目立つようになったとか。
まあ今どうこう言っても検証はできないだろうが、本当にそんな頻度で化けてたら使い物にならないと思うんだよね。 そんな頻度というけど、めったに起きないよ。年1か隔年くらい? たまたまエラー検出をすり抜けて化けたとして
周辺ブロックで一切エラーないのも不思議
数ビット反転して運悪く誤ったエラー訂正かかったとか ソース忘れたので信憑性は分からないけど、
mdadmのスクラブはRAID6であってもデータに合わせてパリティを変更するだけなので、
bit rotの対策にはならないと聞いた >>968
RAID5 だとパリティエラーを見つけてもデータがおかしいのかパリティがおかしいのか判別不能で、ログを見るとどうやらデータを真としてパリティを再計算したような感じだった。
ちょっとその辺確認した経緯の詳細は覚えてないんだけど。
でも RAID6 なら、1台の化けならどれがおかしいか判別可能だから、まじめに実装すれば修復可能なはずだけどね。
面倒くさかったのかな。 以前単体のUSB-HDD使っていたときに
ある音楽ファイルの後半が別の音楽ファイルの先頭にくっついた状態になったことがある
(それも多数のファイルで)
NAS使い始めてからはまだ遭遇してない >>970
FAT系の FS だとクロスリンクっていう FATの壊れ方だね。
質の悪いデフラグ使ったとか、フラッシュ前にUSB引っこ抜いたとかで起こるんじゃないかな。
FAT 部分は 1セクタ壊れても広範囲の障害に繋がりえるけど、そういうのに備えて FAT は二重化されてて、壊れてから更新かけてないなら修復できるんだよね。
ただ実際は壊れたことに気付かず更新かけて、バックアップFAT も結局壊れた内容で同期されちゃうのが大抵のことで、結局物理エラーの備えにしかなってない。
マウント時に二つの FAT を比較してくれれば破損の確認はできるはずだけど、そういうことはしてくれてないっぽかったね。 >>968
専門家では無いが趣味でエラー訂正符号を使った通信をPICで使っているが
1bitのエラーを訂正可能なら2bitのエラーは検出は可能だよ
エラー訂正範囲検出範囲以上のエラーがあっただけだと思う
数年放置してからスクラブ実行して壊したとかね
ローカルHDDや外付けHDDにバックアップ保存する場合はRARでリカバリレコード(冗長データ)を追加して保存するのが当たり前だった 316使用中。
データ整理してたらディスク1逝った……
WD red plus の 6tb を買おうとAmazon見たら売り切れ。
ヨドバシも売り切れ。
おおぅ……(´・ω・`) 何百本も使うなら影響あるだろうけど数本なら
個体差の方が大きそうだし只のRedでええ気がする なるほど
だと混在させるとアクセスがギクシャクしてダメか plusはCMRのはずやが……。
ちゃうの?商品ページに書いてたので、買っちまったんやが。(´・ω・`) 無印は混在だから
>>975は正確ではないって意味じゃね? リカバリなう。
頼む……ディスクアレイ潰れないでくれぇ!(゚Д゚) 別に壊れたってバックアップから復旧すれば良いんだから、気楽にいこうや バックアップが取れていなかったってのもよくあること openssl 1.1.1に上げた人いる?
python3.9.7入れようとしたらopenssl1.0.2以降が必要だった
1.0.1t-1+deb8u12から1.1.1lに上げてもいいのかな?
いろんなとこに影響ありそうなんで止めておくべきか
214 6.10.4 システムとは別の/optとかにopenssl導入して
pythonのconfigure時にパス指定差し上げて ありがと
/optにopensslとpython3.9を入れたよ
Home Assistantを使いたかったのでpython3.9にしたけど
ラズパイにした方がいろいろ使い勝手がよさそう... 共有のBitrot保護オンにすると圧縮って選べるみたいですが
トラブル時復旧難しくなるんですかね 先日ReadyNASの表示から進まなくなり、
このスレに書いてある事を参考に電池を変えたが駄目だった。
他で色々情報を集めてみてエレクトロニッククリーナーという商品に行き着いた
それで基盤全体を洗浄してみたら見事起動した ようするにホコリとかがたまってリークかなにかが起きてたってことか。
今時の電子部品なんて、電解コンデンサはともかくそれ自体が劣化するようなもん無さそうだもんな。
何でも洗えば直りそうだ。 >>988
どうせRAIDを組んでたらデータ復旧に数百万円の請求が来るから一緒
それよりバックアップ このスレッドは1000を超えました。
新しいスレッドを立ててください。
life time: 424日 6時間 23分 50秒 5ちゃんねるの運営はプレミアム会員の皆さまに支えられています。
運営にご協力お願いいたします。
───────────────────
《プレミアム会員の主な特典》
★ 5ちゃんねる専用ブラウザからの広告除去
★ 5ちゃんねるの過去ログを取得
★ 書き込み規制の緩和
───────────────────
会員登録には個人情報は一切必要ありません。
月300円から匿名でご購入いただけます。
▼ プレミアム会員登録はこちら ▼
https://premium.5ch.net/
▼ 浪人ログインはこちら ▼
https://login.5ch.net/login.php レス数が1000を超えています。これ以上書き込みはできません。