【SAN,NAS】ストレージ鯖総合【iSCSI,FC,IB,10GbE】

**Fiber Channel InfiniBand IBoE** · 2011/11/12(土) 08:56:52.46

比較的高機能高性能なストレージ鯖に付いての総合スレです。

家庭・SOHO向けNASは以下
NAS総合スレPart17 (LAN接続HDD)
http://hibari.2ch.net/test/read.cgi/hard/1312673246/

【10GbE】10Gigabit Ethernet【10GBASE-*】
http://hibari.2ch.net/test/read.cgi/hard/1208537897/
InfiniBandについて語るスレ
http://hibari.2ch.net/test/read.cgi/hard/1305552336/

**不明なデバイスさん** · 2013/11/02(土) 20:45:11.10

誤爆すみません

**不明なデバイスさん** · 2013/12/07(土) 01:53:05.51

たまにヤフオクに出るSunのFCストレージがなんかめっちゃ高額で取引されてる
実際死ぬほど欲しいけど8万とかポン出せんよ

**不明なデバイスさん** · 2014/01/10(金) 20:07:54.41

OmniOSの新しく出たr151008f 、ZFSのスケジューラにかなり手が入ってて、なんか良い感じ。
ZFS特有の書き込み時の息つきが、大分少なくなって、安定した速度出るようになってきた。

Hyper-V 2012上のiSCSI RDMでのベンチ、ストレージはConnectX 2 QDR IPoIB先
-----------------------------------------------------------------------
CrystalDiskMark 3.0.3 x64 (C) 2007-2013 hiyohiyo
Crystal Dew World : http://crystalmark.info/
-----------------------------------------------------------------------
* MB/s = 1,000,000 byte/s [SATA/300 = 300,000,000 byte/s]

Sequential Read : 1156.275 MB/s
Sequential Write : 589.916 MB/s
Random Read 512KB : 805.656 MB/s
Random Write 512KB : 492.154 MB/s
Random Read 4KB (QD=1) : 26.825 MB/s [ 6549.1 IOPS]
Random Write 4KB (QD=1) : 24.168 MB/s [ 5900.3 IOPS]
Random Read 4KB (QD=32) : 233.865 MB/s [ 57095.9 IOPS]
Random Write 4KB (QD=32) : 135.931 MB/s [ 33186.3 IOPS]

Test : 1000 MB [E: 25.4% (4948.8/19455.9 GB)] (x5) <0Fill>
Date : 2014/01/10 19:45:40
OS : Windows Server 2012 R2 Server Standard (full installation) [6.3 Build 9600] (x64)

**不明なデバイスさん** · 2014/01/10(金) 20:40:04.94

せっかくご自慢の構成を組んだのならIometerあたりのちゃんとしたツールを使えばいいのに、
どうしてこの手のいかがわしいツールを使ってるのが主流になっちまったんだろうなあ
まあ、おおまかな傾向は分かるけどさ、なんつーか勿体無い感

**不明なデバイスさん** · 2014/01/10(金) 21:52:38.05

>>85
ぶっちゃけ、面倒なんだよ、ログ書き出すのが。
カンマで区切ってんで、コピペしてcsvで見てくれ。
こんなんでいいか？
size,% of size,% reads,% random,delay,burst,align,reply
65536,100,100,0,0,1,0,0

IOps,Read IOps,Write IOps,MBps (Binary),Read MBps (Binary),Write MBps (Binary),MBps (Decimal),Read MBps (Decimal),Write MBps (Decimal),
3669.485581,3669.485581,0,229.342849,229.342849,0,240.483407,240.483407,0,
3669.485581,3669.485581,0,229.342849,229.342849,0,240.483407,240.483407,0,
Transactions per Second,Connections per Second,Average Response Time,Average Read Response Time,Average Write Response Time,Average Transaction Time,Average Connection Time,Maximum Response Time,Maximum Read Response Time
3669.485581,0,0.271989,0.271989,0,0.271989,0,418.4154,418.4154
3669.485581,0,0.271989,0.271989,0,0.271989,0,418.4154,418.4154

size,% of size,% reads,% random,delay,burst,align,reply
65536,100,67,100,0,1,0,0

IOps,Read IOps,Write IOps,MBps (Binary),Read MBps (Binary),Write MBps (Binary),MBps (Decimal),Read MBps (Decimal),Write MBps (Decimal),
2852.524916,1911.496856,941.028061,178.282807,119.468553,58.814254,186.943073,125.271858,61.671215,
2852.524916,1911.496856,941.028061,178.282807,119.468553,58.814254,186.943073,125.271858,61.671215,
Transactions per Second,Connections per Second,Average Response Time,Average Read Response Time,Average Write Response Time,Average Transaction Time,Average Connection Time,Maximum Response Time,Maximum Read Response Time
2852.524916,0,0.349877,0.33433,0.381456,0.349877,0,752.4872,752.4872
2852.524916,0,0.349877,0.33433,0.381456,0.349877,0,752.4872,752.4872

**不明なデバイスさん** · 2014/01/11(土) 08:50:33.68

下のほうはデータベース的なアクセスを想定したパターンやね
さすがに64KBになるとIOPSが下がってるな

ターゲットのディスクサイズは>>84で1000MBとか書いてあるのと同じ？
だとするとキャッシュに収まるサイズだね
# of Outstanding IOsを1にしてるんじゃないかと思うけど、ここはアクセス元のOSのデフォルトのqueue depthか自分で設定してる値にするのがよいかと

**不明なデバイスさん** · 2014/01/13(月) 16:43:56.75

>>87
下はDBつか、一般的なファイルサーバーっつー扱いかな。どこのサイト見ても。
woker 1なんでこの値だが、ストレージ側のIOは、まだサチって無いと思う、
woker 2で取った結果、IOpsは伸びてるんで。
ターゲットサイズは3GB弱だったかな。

ストリームリードはsize 256k、ファイルサーバーは設定そのままで
outstanding 8、woker 2でやった結果。
ターゲットサイズは5GB

http://www1.axfc.net/u/3143339.csv

88 · 2014/01/13(月) 16:47:53.85

うｐファイルミスってた。

http://www1.axfc.net/u/3143357.csv

**不明なデバイスさん** · 2014/01/13(月) 22:42:52.95

workerは1でいい。
アクセスパターンと、# of Outstanding IOsが重要。
後者を上げて行ってもIOPSが伸びなくなれば、そこが上限だから。

**不明なデバイスさん** · 2014/01/16(木) 12:42:52.28

まあ面倒なのは俺もそう思うが、それでもCDMは無いわー
以前、8GBのcache積んだDiskArrayを売り込んできた代理店が
CDMの結果をドヤ顔で出してきたから、さすがに苦笑してお引き取り願った

**不明なデバイスさん** · 2014/01/16(木) 14:44:13.50

単純すぎて素人の自己満足目的以外には意味が無いよね＞CrystalDiskMark

**不明なデバイスさん** · 2014/03/15(土) 16:38:34.63

あれ？FibreChannelの単独スレなかったっけ？

**不明なデバイスさん** · 2014/08/25(月) 23:10:47.95

FreeBSDのctld、機能的にも大分充実してきたね。
あまり真面目に追ってなかったが、10-stableにSCSI-3 UNMAPとVAAI、MS ODXまでMFCされたみたい。
VAAIは試せる環境が無いから出来ないけど、ODXの方は、テストしてみた。
同一LUN内でのコピーや、別LUNへの移動・コピーで、ちゃんとODX動いてる様だ。
vMotionや、LiveMigrationでもやらなきゃ、あまり目に見える効果は少ないけど、
クライアントがWin8以上なら有効だから、1GbEのiSCSIみたいな構成なら、
ディスク内でのコピーなんかでも、ストレージ内で完結する分、
体感出来る部分はあるかも、利用環境次第な所はあるけど。

UNMAPの方も、当然だけど、普通に動いてる。
illumosのCOMSTAR同様、削除ブロックの回収動き出すと、通常の読み書き止まるけど。
これはZFS側の問題だから、まぁしゃーないのか。改善出来るなら、なんとかしてほしい所だけど。
COMSTARと違って、ctl.confでこの辺は使わないって選択も出来るから、
必要無ければ、使わなきゃ良いんだけど。

後、理想を言えば、FC target機能が付けば、ほぼ完璧な気はするけど、
とりあえず、iSCSI targetとしては、かなり良い感じになってきたね、やっぱスポンサー付くと違うねぇ。

OmniOSで動かしてるストレージサーバー、10.1出たら、BSDに置き換えてみようかなぁ。

**不明なデバイスさん** · 2014/08/27(水) 22:45:37.86

お勧めスレがなかったので質問。
QNAP・ts-220を買おうかと思うんだが
新興のASUSTOR・AS-202TEが気になっている。
前者は歴史があるけどCPUがARM系。
トレイがプラスティック。
後者はその逆でCPUがインテルでトレイが金属なんだけど新興でレビューがほぼ皆無。

その他も含め皆はどんな選択をする？
広い視野で意見を聞きたい。

**不明なデバイスさん** · 2014/08/30(土) 01:05:43.78

必要なスペックがあればあとは両方買って自分で自分のために比較、
ということでいいんじゃないかな？

**不明なデバイスさん** · 2014/08/30(土) 08:10:46.95

ASUSTORってQNAPスピンアウト組が始めた会社だっけ？
しかもQNAP内でも比較的優秀なチームだったような

**不明なデバイスさん** · 2014/08/31(日) 23:37:24.47

>>96
それが有意ならいちいち質問しない。
>>97
そうなんだ。
そしてその話を聞いてQNAPにしようと決めた。ありがとう。
体制として不安定さを感じる。
NASの管理体制としてそれは命取りになりかねん。

**不明なデバイスさん** · 2014/09/01(月) 16:45:26.10

意味不明

**不明なデバイスさん** · 2014/09/02(火) 12:20:38.07

>>99
事業継続性の問題。
壊れてハイそれまでよでは
サーバーとしては困る。
チーム単位で引き抜いた組織が
崩壊するのって何処の業界にもある話。

**不明なデバイスさん** · 2014/11/02(日) 04:14:15.26

3万もしない家庭用NASに何を求めてるんだろうこの人

**不明なデバイスさん** · 2014/11/03(月) 02:05:42.22

30万程度ですら、壊れたらハイそれまでなのにね

**不明なデバイスさん** · 2015/03/12(木) 23:23:21.33

ゆい

**不明なデバイスさん** · 2015/03/22(日) 23:36:17.85

ミッドレンジFCストレージの選定で迷ってるます。
IBM V7000、HP 3PAR、DELL Compellent、EMC VNX、日立HUSとかのストレージ構築、保守経験がある方、それぞれ使ってみて良かったところとか、ありえんと思ったところあったら教えて下さい！

性能とかは比較してもよくわからないので、単一障害点の有無とか、費用、メンテナンスのしやすさ、保守ベンダの対応とかの情報が聞きたいです。

基幹系システムなので、24/365の保守が前提です！

**不明なデバイスさん** · 2015/04/21(火) 00:11:51.34

iscsiって売れてるの？

**不明なデバイスさん** · 2015/04/25(土) 15:44:05.65

はい

**不明なデバイスさん** · 2015/04/25(土) 17:38:43.26

>>104
素直にHPかEMCかNetApp

**不明なデバイスさん** · 2015/04/25(土) 21:23:28.67

>>104
どーせ、そいつら繋ぐサーバー有るんだろ？
そこに丸投げしとけ。

ひかくできねー奴が選んだところで良いことねーよ。
さくっと丸投げして、さくっと金払っとけｗ

**不明なデバイスさん** · 2015/10/31(土) 22:59:49.17

最近FC追っかけてなかったけど、Emulex、新しいドライバで
targetに出来るSDK一式出したのね。
お！と思って詳細調べたら、旧世代ごっそり切り落としたドライバだった！orz

せめてLPe12xxx系だけでも入れてくれれば、安い8G品手に入れやすいのに。
まだ当面、Qlogicのお世話になってますかね。

まぁlatency気にせず、スループットだけで考えたら、
40GbEのiSCSIの方が楽に安く出来るけど。

**不明なデバイスさん** · 2015/11/07(土) 14:15:53.65

誠にすみませんが調べてもわかりません。教えて下さい。

iSCSIのメリットってなんなんでしょうか?
もし1対1でストレージにアクセスするならよっぱどローカルにRAID50とか組んだほうが
いいと思うのですが、iSCSIでSANを構成し運用する意味ってあるんでしょうか?

50~70MBあたりのデータを10TBぶん、データを共有したいのですが、いちばん
GbELAN上で速度が速いのは
1.普通にRAID0で3TB*4でNAS
2.普通にJBODなどで10TBぶんをNAS
3.iSCSIでマシン直結のRAID0の12TBをWinなりMacなりで共有
のどれなんでしょう? 3.を考えているんですが、iSCSIを共有するのはよくないと
どこかで見たんですが、壊れちゃったりするんでしょうか。速度はあんまり変わらないんでしょうか。
またiSCSIを直結しているマシンではiSCSIの速度ってどれくらい出るものなんでしょうか。
RAID0的なことはしても意味がないんでしょうか。

なにぶん素人でとんちんかんかもしれませんが、ヒントいただければ幸いです。

**不明なデバイスさん** · 2015/11/07(土) 15:22:06.67

まずRAIDの話とiSCSIの話が全く無関係
iSCSIはデータを共有するための物じゃない
他を考慮しないでアクセスするから同時に繋いだら当然壊れる

**不明なデバイスさん** · 2015/11/07(土) 17:45:17.40

>>111
ご指摘ありがとうございます。
実効通信速度が十分に速い場合、たとえばsataならHDDの転送速度が
ボトルネックとなるのでストライピングしたほうが実際の転送速度は速くなると
思うのですが、調べたところによるとGbEはHDDの転送速度にくらべ十分に
「遅い」のでたぶんストライピングは意味ないんだろうなあとは思いますが、
そういうことですよね?
iSCSIをクロスケーブルでPCに直結すると100MB/S弱程度でつながるようですが、
iSCSI直結でそのPCのローカルドライブとして認識させ、それを他のPCから
GbEを使ってアクセスすると壊れちゃうんでしょうか?　直結させてしまいさえすれば
普通のストレージと同じものだと考えたら、問題ないのかな、と思ったのですが。
壊れるってどうなるんですか?

こうすれば、そこそこの速度でサーバー的に使うPCからはつなぐことができて、
GbE接続している他のマシンからも普通に使えるのかな、と。
普通にNASでつなぐとどこから繋いでも遅くなる気がして今まで敬遠していましたが
今時のGbEはそんなに変わらないんですかね?

**不明なデバイスさん** · 2015/11/07(土) 18:45:05.74

>>112
ああiSCSIにすればSMB/CIFSより速くなるんじゃ無いか？ってことか

＞GbEはHDDの転送速度にくらべ十分に「遅い」のでたぶんストライピングは意味ないんだろうなあとは思いますが、
この部分だけ答えるならHDDはシーケンシャルアクセスだけじゃなくてランダムアクセスもある
ストライピングについては基本的にストライピングは使いません
RAIDは信頼性、可用性を確保するために使用するのが基本

＞iSCSIをクロスケーブルでPCに直結すると100MB/S弱程度でつながるようですが、
SMBでもそのくらい出る
あと関係無いけど最近のはAutoMDI/MDI-X対応してるからクロスケーブル必要ない
＞直結させてしまいさえすれば普通のストレージと同じものだと考えたら、問題ないのかな
うん問題ない
しかしあなたにiSCSIは必要ない

普通にそれなりのスペックでFreeNASあたり使ってればいいんじゃないの？

**不明なデバイスさん** · 2015/11/07(土) 22:15:16.26

ご丁寧にありがとうございます。
しかし最近は速くなってたんですね。
その割にLANが遅い。もう少し研究します。

**不明なデバイスさん** · 2015/11/07(土) 23:00:14.93

>>114
10GBase-T安くなってきたし、そろそろ導入してみたら？

**不明なデバイスさん** · 2015/11/07(土) 23:09:40.35

>>115
使いこなせないのわかってて勧める鬼畜が居るンゴ。
ちなみに、ルータ処理させた場合、haswell i7位の性能で10GbEのワイヤスピードは達成できる模様。
なお、sataではまったく間に合わん模様。

**不明なデバイスさん** · 2015/11/07(土) 23:39:55.83

NAS利用時にGbEで不足を感じるならSMB Multichannelを構成してみたり、
それこそ10GbEを検討すればいいんじゃないかな。

**不明なデバイスさん** · 2016/04/14(木) 08:20:59.27

LUNのバックアップってどうやるの？
ターゲット側だとスナップショットとれないと

**不明なデバイスさん** · 2016/08/20(土) 03:15:34.74

esxi5.5とsolaris11をFCで直結して、ESXiにディスク見せてみたいんだが。。どのようにHBA探せばいいのでしょうか。
単純に通信速度が同じもの買えば、基本いけるのでしょうか。。
iscsiは出来たのでFCにチャレンジしてみたいというところです

**不明なデバイスさん** · 2016/08/20(土) 11:22:50.62

FC target作りたいなら、Qlogicの4Gb以上の物なら大丈夫。
Initiatorとしてならともかく、target用として、
Emulexとか買わないように。

**不明なデバイスさん** · 2016/08/23(火) 02:05:27.46

>>120
なるほど。
qlogicとemulex、イーサネットでいうところの
インテルと蟹みたいな関係なのでしょうか。。
qlogicの4gbpsでさがしてみようと思います。
ありがとうございます。

**不明なデバイスさん** · 2016/08/23(火) 22:36:40.89

>>121
QlogicもEmulexも、Initiatorとして使う分には全然問題なし。

なんだけど、昔から、
Qlogicは、Targetとして使うためのドライバや情報がネットに転がっていたけど、
Emulexはあんまり情報が無い、という構図があったので、
特にOSSのFC TargetデーモンなんかはQlogic一択なことが多い。

そんなわけで、その辺でHBA買ってきてTargetとして使いたい人にはQlogicが鉄板。

最近はEmulexもわりと情報が出てきたので、スキルと時間があるなら頑張れば出来ないことは無いけどね。
オススメはしません。

**不明なデバイスさん** · 2016/08/24(水) 07:02:10.01

これ普通のNICとしても使えるの？

**不明なデバイスさん** · 2016/08/25(木) 02:07:07.17

>>122
そういう経緯があったのですね。
qlogicが無難そうですね・・

**不明なデバイスさん** · 2016/09/11(日) 20:58:29.41

brocade300を安くオクで入手したけどWeb ToolsがIEでもChromeでもFirefoxでも
アクセスできません。FOSをv6.4 -> v7.4にアップグレードしてもだめです。
JREは1.7です。同じ経験したひとアドバイスください。

エラーの状況は
■IE
The version of Java plugin needed to run the application is not installed.
The page from where the plugin can be downloaded will be opened in a new
window. If not, please click here: Download correct Java version.

■Firefox
IPアドレスで http://192.168.1.251/
のようにアクセスしても
「192.168.1.251のアドレス解決をしています…」
と永遠にメッセージが出続ける

■chrome
http://jdl.sun.com/webapps/getjava/BrowserRedirect?locale=en&;host=java.com
にリダイレクトされる... orz

**不明なデバイスさん** · 2016/09/11(日) 21:14:21.61

たいへんだにゃー

**不明なデバイスさん** · 2016/09/12(月) 00:02:05.28

32bitか64bit違いとか

**125** · 2016/09/13(火) 11:27:54.08

↓これが原因っぽい。
Java 7 Update 51以降, およびJava 7 Update 45の適用時のご注意
http://www.fujitsu.com/jp/products/computing/storage/eternus/news/2014/0910.html

とりあえず、OracleのJavaはやめてOpenJDKではWeb Toolsが開いたので深追いは
やめてこれで満足することにしました。

**不明なデバイスさん** · 2016/09/16(金) 11:08:02.73

javaコンパネを開いてセキュリティ→例外サイトに登録、でいけるかも。
IE以外はそもそもjava appletのサポートないよ。

**不明なデバイスさん** · 2016/11/27(日) 16:27:46.02

esxi用のFCターゲット用のストレージマシンを作ろうとしているのですが、
ストレージ用OSとして使い易いもの、おすすめのものはありますか？
（一応、qlogicの4gbカードを入手してます）

**不明なデバイスさん** · 2016/11/30(水) 18:55:21.81

>>130
Slaris/Linux/FreeBSD好きなの使ったらええ。
BSDのctldだけ制限有るが、一対一で使うぶんには
問題無いかと。

**不明なデバイスさん** · 2017/03/26(日) 21:45:01.48

一般的なNASってUSBで外付けHDD使えるけどext4のHDDって使える？
NTFSだけだったりするの？

**不明なデバイスさん** · 2017/03/26(日) 23:35:32.60

そりゃ使う製品によって違うだろう。
仕様に書いてある通りだな。

**不明なデバイスさん** · 2017/03/27(月) 03:14:23.09

その手の製品使ったことないけど
UMSで繋がるならファイルシステムは関係無いだろ

**不明なデバイスさん** · 2017/04/24(月) 23:52:18.94

ハードは何を使うの前提？

**不明なデバイスさん** · 2018/01/01(月) 19:12:22.17

興味がある人だけどうぞ。ネット小遣い稼ぎ方法など。

グーグル検索⇒『工藤のジョウノウノウ』

BXNLGVSM78

**不明なデバイスさん** · 2018/02/24(土) 07:38:24.92

エレコムのNetStorからWD赤HDD取り出して青HDDに置き換えて
赤HDDをヤフオクとかで売りたいんだけど
赤HDDの保証ってWDはやってくれるんだっけ？
エレコム経由なんだっけ？

あと玉突きで余ったHDDのうまい使い方があったら教えてください

**不明なデバイスさん** · 2018/02/24(土) 07:39:36.45

あ、すいません
NAS総合スレと間違えたのであっちで聞いてみます

**不明なデバイスさん** · 2018/04/09(月) 00:58:26.62

HPとかが出してるOEMのFCコントローラーってそのメーカーの鯖でしか使えないとかあったりする？

**不明なデバイスさん** · 2018/04/09(月) 11:17:46.46

そんなわけないけど相性はあるかも試練

**不明なデバイスさん** · 2018/04/10(火) 16:08:22.79

HPのSAS(P410など)はbiosで引っかかること多かった。
まあFCはbootしないのなら切っておけばOKか。

**不明なデバイスさん** · 2018/04/12(木) 16:30:24.00

SAN boot したいとか言い出す？

**不明なデバイスさん** · 2018/04/12(木) 17:16:57.17

LAN10Gbpsに移行するより安くて速いストレージサーバー組みたいだけだから大丈夫

**不明なデバイスさん** · 2018/07/05(木) 09:36:26.00

友達から教えてもらった自宅で稼げる方法
興味がある人はどうぞ
検索してみよう『ネットで稼ぐ方法モニアレフヌノ』

XHM

**不明なデバイスさん** · 2018/08/02(木) 20:02:45.75

HighPointの6418sってx8のsasエンクロージャのamazonでの価格乱高下が凄いな

昨日ポチったときは17000円台だったけど、その後88000円に上がった
4月にも、16000円台まで下がったことあるみたいだけど、相変わらずamazonの価格自動設定アルゴリズムはわからん

**不明なデバイスさん** · 2018/08/17(金) 11:56:13.33

>145
これ、音うるさい？

**不明なデバイスさん** · 2018/11/12(月) 23:35:05.57

http://r2.upup.be/wV2qsULdHm
―――

**不明なデバイスさん** · 2019/09/14(土) 15:18:31.16

USB のNICでiscsi boot出来ない？

**不明なデバイスさん** · 2019/09/14(土) 15:37:59.25

まずは普通のnicでiscsi bootやってみろ。
どこに何が必要かわからないとダメだから。

**不明なデバイスさん** · 2020/02/01(土) 03:44:53.96

映像制作(ビデオ編集)向け共有ストレージ
有力ベンダー短評があったんで貼っとこう
https://matsuri.5ch.net/test/read.cgi/vcamera/1489732355/231-241n

**不明なデバイスさん** · 2020/11/20(金) 12:35:43.80

OpenMediaVault使ってる人いる？
FreeNAS / TrueNASは要求スペックがアレすぎると思って

お手軽ファイルサーバならUbuntu / Debianあたりにsamba入れるだけの方が無難？

**不明なデバイスさん** · 2020/11/20(金) 12:37:17.17

じゃんぱらでアホみたいに売ってるASRock B75Mに、余ってるCeleron G530とメモリを突っ込もうと考えてます

**不明なデバイスさん** · 2020/11/20(金) 12:39:00.00

すみません

NAS総合スレPart33 (LAN接続HDD)
https://mevius.5ch.net/test/read.cgi/hard/1597149181/

の存在をしらなかったので
この質問は取り下げます

**不明なデバイスさん** · 2020/12/09(水) 15:50:19.95

過疎ってるので最近嬉しかったこと
これまで40GbE接続でsamba経由のファイル転送が10Gbpsぐらいだったけど
クライアントの更新でcpuを4790kから5950xに変えたら20Gbps出たわ
環境一式更新したからいろんな要因があると思うけど満足です

**不明なデバイスさん** · 2020/12/09(水) 17:29:12.78

sambaやめてwindows serverに、win10はwin10 pro wsかwin10 entにしなよ
40G NICがrdma対応してるなら5GB/s程度まで出る…かもだぞ

**不明なデバイスさん** · 2020/12/09(水) 17:52:25.68

>>155
お、見てる人おるのね
鯖側が仮想ホスト(proxmox)も兼ねてるのでwinはngなんです
1度sriovを使用して仮想win経由でrdma接続したら
結構スピードは出た記憶があります
ただ接続が不安定になるので常用は止めました

**不明なデバイスさん** · 2020/12/09(水) 23:01:16.52

>>156
proxmoxか…
次期基盤にesxiか引き続きwindows serverか悩んでいたがこれも良さそうだね
無難なのはwindows serverなのは間違いないがチト悩んでみるか

**不明なデバイスさん** · 2020/12/10(木) 03:45:30.55

最近Violinのゴツいサーバ用ストレージをヤフオクで安く手に入れたんたけど、SSDでも数あると結構電気食うのね。
200Vで7A用のケーブル溶けたし音も凄まじいので実験用すら厳しい。
物はお小遣いレベルだけど処分とか考えると完全に高い勉強代になりそう。

**不明なデバイスさん** · 2020/12/10(木) 09:23:46.10

200V 7Aか…
電気代凄そうだな
それに見合う性能あればいいかもしれんが俺には無理だな

**不明なデバイスさん** · 2020/12/16(水) 09:29:20.74

>>157
proxmox はいいぞ
なんせファイルフォーマットにzfsが使用できる！
これでraidのサイレントクラッシュの恐怖から開放される！
インストールディスクもソフトウェアraid組める！zfsのraid1で安心だね！

turnkeylinux(アプリ毎にOSが提供されてる。環境構築クソ楽)と相性がいい！ポチポチ押すだけでインストールできる！
スナップショットも完全バックアップもwebui上でできる！
クラスタやネットワーク分散ストレージ(ceph)に対応！
Windowsだってkvm上で動くぜ！1台入れておくと便利！

デメリットはチューニングする時にコマンド必須。特にディスク関連。

**不明なデバイスさん** · 2021/02/07(日) 02:13:10.69

ESXiのデータストアにするならNFSとiSCSIどっちがいい？
できればマルチパスしたい

**不明なデバイスさん** · 2021/02/07(日) 11:59:33.13

両方試してみたら？
複数台でvmware HAやるならNFSの方がいいと思うけどNFSは書き込み遅いから非同期に…なんて話もあるよな

**不明なデバイスさん** · 2021/02/07(日) 12:41:29.97

ふぁいばーちゃねるさんじゅうにぎがびっと

**不明なデバイスさん** · 2021/02/27(土) 16:22:43.19

connectx4以降に導入するWinOF2にopensmが入っていないんだがIB使う場合はWinOF使え、ってこと？

**不明なデバイスさん** · 2021/03/16(火) 15:24:47.43

いつの間にかinfinibandスレ無くなってたのでこちらに。
LinuxとWindows2012をそれぞれConnectX2で直結，iperfでは17gbps出てるが
ipoibだと全然性能出ない。

最終的にやりたいことは数テラバイトクラスのデータの週次のバックアップで
rsyncとかsftpとかsmbとかいろいろ試したけどどれも素のギガビットイーサネット
と変わらないか，むしろやや負けている。24時間じゃ終わらない感じ。
これはもうディスクの書き込み速度が頭打ちってことですか？
一応linux側もwindows側もRDMA有効になってるけれど通信自体にRDMAがつかわれて
いるか確認する方法ありますか？connectx2のファームウェアは両方とも
2.10.720です。

**不明なデバイスさん** · 2021/03/16(火) 17:48:28.38

>>165
まずローカルで1ファイルにしてから送ったら？

**不明なデバイスさん** · 2021/03/16(火) 17:58:11.16

そのファイルサイズに対するディスクの読み取り速度が遅いというのはよくある展開だしね。

**不明なデバイスさん** · 2021/03/17(水) 00:12:32.84

>>165
rdmaが有効ならタスクマネージャーでNWの通信量がカウントされない
正確に把握したいならパフォーマンスカウンタにrdmaの項目がある

**不明なデバイスさん** · 2021/03/19(金) 07:22:53.72

>>165 です
調査の結果ローカルのディスクがボトルネックになっているという結論になりました。
何かと苦労が多いConnectX-2 を見限って ConnectX-3 買おうとも考えてましたが
今の状態では意味がないのでまずはSSDをたくさん買ってRAIDを組むところから
始めます。

**不明なデバイスさん** · 2021/03/19(金) 07:31:33.32

>>169
試験するならramdisk、もしくはキャッシュソフトを使うといい
で、だが、そもそもrdmaはlinuxとwindowsでは対応できないんじゃない？
infinibandならいけるんかな？

**不明なデバイスさん** · 2021/03/19(金) 21:25:17.83

sambaがrdma対応するのはいつになるかな

**不明なデバイスさん** · 2021/03/31(水) 09:25:07.16

割と最近の（8年前とかじゃなく）Linux同士でSRP使えている人いますか？
ターゲット
Fedora32 + ConnectX-2 + targetcli
イニシエータ
Ubuntu20.10 + ConnectX-2 + srp_daemon (apt installしたもの)

イニシエータのポート1とターゲットのポート1を直結。
（と言ってもターゲットのHCAは1ポートモデルですが。）

この人のブログ
http://onefootmc.blogspot.com/2016/03/srp-1-srp-target.html
参照しながらやってみて，イニシエータからターゲットは見えてるんだけどログイン失敗する。

ターゲット側のログ
[ 1037.081152] ib_srpt Received SRP_LOGIN_REQ with i_port_id 0002:c903:000e:b423:0002:c903:0010:b189, t_port_id 0002:c903:000e:b422:0002:c903:000e:b422 and it_iu_len 8260 on port 1 (guid=fe80:0000:0000:0000:0002:c903:000e:b423); pkey 0xffff
[ 1037.084512] ib_srpt Rejected login for initiator 0002:c903:0010:b189: ret = -13.
[ 1037.085612] ib_srpt Rejecting login with reason 0x10006

**不明なデバイスさん** · 2021/03/31(水) 09:26:49.54

ターゲット側
CA 'ibp2s0'
　　CA type: MT26428
　　Number of ports: 1
　　Firmware version: 2.10.720
　　Hardware version: b0
　　Node GUID: 0x0002c903000eb422
　　System image GUID: 0x0002c903000eb425
　　Port 1:
　　　　State: Active
　　　　Physical state: LinkUp
　　　　Rate: 40
　　　　Base lid: 2
　　　　LMC: 0
　　　　SM lid: 2
　　　　Capability mask: 0x0259086a
　　　　Port GUID: 0x0002c903000eb423
　　　　Link layer: InfiniBand

**不明なデバイスさん** · 2021/03/31(水) 09:27:04.82

イニシエータ側
CA 'ibp2s0'
　　CA type: MT26428
　　Number of ports: 2
　　Firmware version: 2.10.720
　　Hardware version: b0
　　Node GUID: 0x0002c9030010b188
　　System image GUID: 0x0002c9030010b18b
　　Port 1:
　　　　State: Active
　　　　Physical state: LinkUp
　　　　Rate: 40
　　　　Base lid: 1
　　　　LMC: 0
　　　　SM lid: 2
　　　　Capability mask: 0x0251086a
　　　　Port GUID: 0x0002c9030010b189
　　　　Link layer: InfiniBand
　　Port 2:
　　　　State: Down
　　　　Physical state: Polling
　　　　Rate: 10
　　　　Base lid: 0
　　　　LMC: 0
　　　　SM lid: 0
　　　　Capability mask: 0x0251086a
　　　　Port GUID: 0x0002c9030010b18a
　　　　Link layer: InfiniBand

**不明なデバイスさん** · 2021/04/01(木) 03:51:39.01

opensm起動していないとか
その人の手順にはあるからやっているとは思うけど

**不明なデバイスさん** · 2022/06/25(土) 23:29:16.13

ツイフェミはメガリアとかの影響だから別に論理は破綻してないわけよ

**不明なデバイスさん** · 2022/06/25(土) 23:29:17.12

>>10
そう言われるとそうだなまさかこんな形でなんJコンボの歴史をふりかえるとウクライナはどうするのが正解なんだよとｗ

**不明なデバイスさん** · 2022/06/25(土) 23:29:19.35

なんの意味も知らないなこの男

**不明なデバイスさん** · 2022/06/25(土) 23:29:21.06

>>98
どうなってんだろうな

**不明なデバイスさん** · 2022/06/25(土) 23:29:24.20

>>64
スポンサードされてんだぞ

**不明なデバイスさん** · 2022/06/25(土) 23:29:25.61

人権ないって言われているから