【10GbE】10Gigabit Ethernet 17【10GBASE-T等】
■ このスレッドは過去ログ倉庫に格納されています
2.5、5、10ギガビットイーサ(10GBASE-*)について語るスレ
価格がこなれてきた10GBASE-Tは光ケーブルはもちろん、DACやRJ-45も対象です。
過去スレ
【10GbE】10Gigabit Ethernet 16【10GBASE-T等】
https://mevius.5ch.net/test/read.cgi/hard/1656134308/
【10GbE】10Gigabit Ethernet 15【10GBASE-T等】
01. https://mevius.5ch.net/test/read.cgi/hard/1648898823/
【10GbE】10Gigabit Ethernet 14【10G以下】
02. https://mevius.5ch.net/test/read.cgi/hard/1637052952/
【10GbE】10Gigabit Ethernet 13【10G以下】
03. https://mevius.5ch.net/test/read.cgi/hard/1617429181/
【10GbE】10Gigabit Ethernet 12【10GBASE-T等】
04. https://mevius.5ch.net/test/read.cgi/hard/1604362122/
【10GbE】10Gigabit Ethernet 11【10GBASE-T等】
05. https://mevius.5ch.net/test/read.cgi/hard/1594720220/
【10GbE】10Gigabit Ethernet 10【10GBASE-T等】
06. https://mevius.5ch.net/test/read.cgi/hard/1585234045/
【10GbE】10Gigabit Ethernet 9【10GBASE-T等】
07. https://mevius.5ch.net/test/read.cgi/hard/1576641447/
【10GbE】10Gigabit Ethernet 8【10GBASE-T等】
08. https://mevius.5ch.net/test/read.cgi/hard/1566384522/
【10GbE】10Gigabit Ethernet 7【10GBASE-T等】
09. https://mevius.5ch.net/test/read.cgi/hard/1553105861/
【10GbE】10Gigabit Ethernet 6【10GBASE-T等】
10. https://mevius.5ch.net/test/read.cgi/hard/1533077761/
【10GbE】10Gigabit Ethernet 5【10GBASE-T等】
11. https://mevius.2ch.net/test/read.cgi/hard/1515779986/
【10GbE】10Gigabit Ethernet 4【10GBASE-T等】
12. http://mevius.5ch.net/test/read.cgi/hard/1493036840/
【10GbE】10Gigabit Ethernet 3【10GBASE-T等】
http://echo.5ch.net/test/read.cgi/hard/1476100955/
VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured >>246
>>245のリンク先の下の方に以下記載がある
===========================
Ethernet 経由でブートする場合、2.30.8000 よりも古いファームウェア バージョンのアダプタ カードを使用する場合は、Ethernet FlexBoot でアダプタ カードを書き込む必要があります。それ以外の場合は、VPI FlexBoot を使用します。
===========================
vpi flex boot(って何？)を使ってる？
わからんならこの際ファームを2.30.8000より前にしてみるとか >>246
USBブートのLinuxでも良いので
connectx-5が接続されているPCを起動した上で、pingが通るか？確認してみては？
NASからのiSCSIブート出来ない、pingが通っている様に見えない等
複数の問題が発生しているから、面倒でも切り分け作業が必要だよ
1.通常のOS起動後、connectx-5が正しくアドレスを取得していて、pingが通るか？
2.Windowsで起動した上で、iSCSIでNASへ接続して、ネットワークドライブでは無く、普通のドライブとして認識し、読書き可能であることを確認
3.iSCSIブートが出来ない理由の再検討
って感じで検証を進めないと、問題が何処にあるのか手探りになってしまう コロコロID変わってすまんが
>>247
FlexBootってConnectxのOpROMの名前で、VPIカードっていうのは、
infinity BandもSFP系の光も両方使えるカードのことです。
なお、今回買ったのはSFP系しか使えないカードで初回Verで3.2位が入ってたからそれ以上下げるのはちょっと・・・
後、FlexBoot対応したのはConnectx-3以降だったと思うのでこちらは問題ないかと思ってます。
>>248
LinuxのUSBBootですね、試してみます。
Windows上では起動後ドライバ認識してネットワーク接続とiSCSI認識できてるんで、
>>240さんが言ってるようにオートネゴやモジュール関連かもしれないと思ってました。
>>249
192.168.11.100は宅内のNASですね・・・・
iSCSIターゲットなので反応するようにしてます。
なお、DHCP鯖の192.168.11.1も反応はありませんでした。
>>250
ConeectX-4がそろそろEOL迎えそう・・・と(勝手に)思っており、
1.3万円の差額でConeectX-5が買えたので、
新しい奴のほうがいろいろ出来るだろうという希望的観測だけでこちらにしました。
また、Windows起動後のドライバー読み込んで接続した後の動作については
文句はなく、超安定しております。
長々と申し訳ありませんが、よろしくお願いします。 >>251
既に、Windows上でNIC認識とiSCSI認識出来ているのですね
ならiSCSIブートに絞って良いと思います
報告見落としたみたいで、申し訳ない >>252
㌧クス
念のためUbuntuでも試しましたが認識してました。
ここまで来るとSFPモジュールとかしか・・・
10Gtekの安いモジュール使ってるので・・
https://i.imgur.com/DZm6dXU.jpg >>253
ベンダロックインに引っかかるとリンクアップすらしないぞ >>254
ベンダロックインってマ？
なんでOS起動後は出来るのに前段階では出来ないんだよぅ・・・・
スレの皆さんConnect-xでどのモジュール使ってますか？ 純正のConnectXにベンダーロックインは無いんじゃ
あったらOS起動後も使えないはず x3、x4、microtikでDACは全部10gtek >>253
Synology NASからのiSCSIブートが出来ない状態ですよね？
https://kb.synology.com/ja-jp/DSM/tutorial/How_can_I_troubleshoot_iSCSI_connection_issues_7
iSCSIイニシエータがiSCSIターゲットを検出したが、接続に失敗した場合：2. DSMで[複数セッションを許可]を有効
を含めて、全て確認されましたか？ >>258
はい、全通りためしてます。
複数セッション許可は最初に検証しました。
また、>>246 にあるようにCSM有効状態で
Flexboot Shellを起動してPingが通っていないのでベンダロックインを疑っていました。
ただ、不思議な事にOS起動すると通信出来るんですよね・・・・
25Gbps対応のモジュールじゃないとダメなのか・・・? Connect-x5のSFPポート1個モジュール認識しなくなりやがった・・・・
もしかして当たり引いた可能性が?
(;´д｀) Connect-X5(MCX512A-ACAT)買ったんで、お試しでiSCSIブートを設定してみた
モジュールは10GtekのASF-10G-T(Mellanox互換のヤツ)
一応Booting from SAN～までは行ったけど、OSのインストールタイミングがよくわからん…
USBメディアブートを優先にするとiSCSIの初期化がスキップされるっぽい？
https://i.imgur.com/U9Vb7mD.jpg >>261
浦山
同じモジュール買ってみるわ
NUCの状況だと、別ディスクでOS立ち上げたらドライブ見つけらたんだけど、見つからない？
順番変更でUSB起動してOSインスコして順番戻すと行ける希ガス
ちな、RJ45の変換モジュールだよねぇ・・・
SFP+のモジュールじゃないっすよねぇ・・・・ >>262
このモジュール、一応NIC側はSFP+のはず
詰まってるのは
・F8やBIOSメニューで任意のデバイスから起動できるので、それでUSBからブート
・Windowsのインストール画面でNICのドライバをロード
(インボックスドライバが無いみたいで、デフォだとドライブが見えない)
→ドライブが出てこない…
適当にDellのサイトから落としてきたドライバが合ってない気もするけど
(OSインストール画面でexeを叩いてドライバをインストールは出来なかったはずなので、zipのを拾ってきた)
初期不良潰しとノウハウ蓄積を兼ねて遊んでる段階なので、色々試してみるよ
あと、恐らくSynologyのiSCSI LUN IDは1から作るようだからNICもBoot LUNは1にしとかないと、iSCSI Targetが見つかってもLUNが見つからない事態になる >>263
>>244 にあるページや、
いか参照でどうでしょうか?
ttps://docs.nvidia.com/networking/display/winof2v237/Extracting+Files+Without+Running+Installation
MLNX_WinOF2-2_0_<revision_version>_All_x64.exe /a /vMT_DRIVERS_ONLY=1
ぶっちゃけ、iscsiが認識できてないので、
なんとも言えませんが、
上記方法でドライバー解凍したらドライバーファイルだと思う物はでてきました。
(～.inf等のファイル)
ちな、モジュールはSFP+からRJ45に変換する奴ですよね？
RJ45の10Gbps接続ですか？
SynologyのLUNはありがとうございます。
Windowsのインストーラ起動後もiscsi接続状態になってます? >>262
SFP+モジュールは信号を変換するのが普通(DACが特殊)
RJ45(10GBASE-T)だろうが光(10GBASE-SR等)だろうがSFP+モジュールなのは変わらない DACでも何らかの変換はしてるはず
完全直結ならベンダーロックインもスルーのはずなので DACはコネクタどはなく直出しの10GBASE-CXだろ
昔懐かしい10BASE-2とか同軸ケーブルの子孫 ベンダーロックはSFPのEEPROMの話なので
媒体変換は全く関係ありません >>261
10Gtekのモジュールって以下のやつであってる？
いっぱいあって探すの大変・・ｗ
mazon.co.jp/dp/B09HZJB214/ >>269
それ、自分もアマゾンで買った
まあ、「～互換」の部分は来たモノにはどこにも書いてないから分り難いね >>240
もしかして、RJ45のモジュールって10Gbpsだけのリンクアップ？
1Gbpsでリンクアップできない奴？ >>261
続き
一応Windowsのインストーラがドライブを認識するとこまでは行った
USBブートはダメそうだったんで、ConnectXでの手順がヒットするWDS環境を作った、まあまあ面倒
https://i.imgur.com/jHFUhV7.jpg
ただ、続行するとndis.sysのBSODになる…
ググるとinstall.wimのレジストリを弄ってページファイルを無効にする回避策が見つかったけど、ダメだった >>273
もしかして、RJ45のモジュールって10Gbpsだけのリンクアップ？
因みにIntel版の場合だと、Windowsの細かいビルド番号によっても出来るできない有ったから手持ちのディスク全部試した
1Gbpsでリンクアップできない奴？ 尼で言ってたRJ45とSRのMellanox互換モジュールが届いたけどうまくいかねー・・・・
ちな、>>273 さんってマザボとCPUなにに使ってます？
(13900k+Z790-F Gaming)
ちな、LUNって領域ごとに1からスタートでいいんですかね？
互換モジュールって両方揃えないとだめなんだろうか・・・
それとも直結・・・？
ちな、LAN構成とConnectXの設定ってどうなってます？
DHCP(buffalo)
｜
SWX3100-18GT
｜＿＿＿＿＿＿＿＿＿＿＿＿＿＿
｜ ｜
Synology(DS1621) メインPC(ConnectX-5)
iSCSIターゲット鯖 イニシエータ鯖
192.168.11.100(SFP+) 192.168.11.130(固定のはず・・・)
i.imgur.com/ziHANQ0.jpg
i.imgur.com/bMR7cJB.jpg
i.imgur.com/hIu39Uj.jpg >>275
うちの構成、検証に関係する部分のみ
(暫定なので遊び終わったら変える予定)
GS316(1GBase-T SW)
|↳DS918+(iSCSI Target:DSM7.2)
|↳仮想マシン(WDS,DHCP:Server 2022 Std)
|
AT-XS910/8(10GBase-T SW)
↳X470D4U+3900X+ConnectX-5
ConnectXの設定(パラメータ類はDHCP経由で拾ってくるので最低限)
https://i.imgur.com/xKYw42r.jpg
https://i.imgur.com/DNN4jQ4.jpg
https://i.imgur.com/MQLQBAy.jpg
WDS/DHCPサーバの設定
https://i.imgur.com/UrXEQhS.jpg
ブート画面(途中で止める為にわざとLUN IDを変えてある)
https://i.imgur.com/u3E70FS.jpg
LUN IDはWindowsのiSCSIイニシエータ等で確認できる
IDがどの単位で採番されてるかは分からん
https://i.imgur.com/cibnVwv.jpg
なお、NWは192.168.0.0/16で構成してある >>276
㌧クス
そのあともSynologyのPXE設定してみてちゃんとできてるかとかやってみましたが、
どうも接続がうまくいきません。(HyperｰV1世代/内臓LANで確認)
(ConnectX-5のPxeも試しましたが、だめでした。)
Mellanoxの板が悪いのかと思いましたが、Windows起動後には高速通信できているので、
ASUSのゲーム用ママンを使ってるせいかもしれません・・・
理由として、FlexBootのShellで立ち上げた際にもループバックアドレスにも反応がないこと、
Synology側でDHCP兼PXEにしていたが両方反応がなく、Pingも反応しない2点があったのでそう思いました。
これ、おとなしくiscsiBoot機能が内臓されてるママン買ったほうが早いっすよね・・・
orz
X710-T2LとConnectX-5で11万無駄にした( ;∀;)
ConnectX-5はSFPで使うから(涙声)
https://i.imgur.com/CrxOKve.jpg
https://i.imgur.com/a9Bk0V6.jpg
https://i.imgur.com/4rVXXIe.jpg >>276
277だが、iPxeのフォーラム探ってたらこんなの出てきたんで置いとく
ttps://github.com/ipxe/ipxe/discussions/324 あ、良く見たらiPxeで起動してDHCP取得試してなかった (;´д｀)
UsbとFlexboot shellで起動してDhcp取得出来るか試さないと・・・・
出来るんだったらiPxeから引っ掻けてiscsiboot出来るかもしれん 279です。
いろいろ試して、>>261にあるFlexBootバージョンにバージョンダウンしたりしましたが、
iscsiに接続できず、心が折れてPXEからのiPXEのチェイン呼び出しでiSCSI接続をする方向にしようと思います。
ただ、まったくできないのはおかしいので、ちょっと購入元に聞いてみたいと思います。
ちなみに、X710-T2LをNUCに刺して、上記にあったSFP+⇔RJ45変換モジュールにつないだのですが、
NUC(Windows)側でネットワーク共有をしてDHCPをしていたのですが、
FlexBoot時に(Windows側から)送信はあっても、受信が全くないという状況でした。
また、FlexBootでDHCPを取得させようとしてもだめでした。
やっぱりNICがちょっとおかしい・・・？
iPXEとスクリプトが分かりにくいですが、なんとなーーーく見えてきました。
(Hyper-V 第1・2世代でどちらもWindowsの起動ディスクをBoot出来ました。)
iSCSI接続もできるみたいなので、起動ディスクにLANドライバ入れてiSCSI接続してインスコしたら使えそう・・・？ >>284
2021年以降は死んでるけど、存在してた
検索で出てきて( ﾟДﾟ) すげーiscsiスレあるのか。
かってはSIの最後の砦と言われていた頃の残滓だな。 当たり前だがLAN越えのレイテンシがあるから使ってて遅んで、ストレージ集中管理とかの目的がない限り個人で使っても意味のない技術
iSCSIに限らずSANブート全般だが >>287
まあまあ、本人たちが趣味でやってるんだし他に迷惑かけてるわけでもなし
そっとしといてやろ iSCSIの発展かは分から無いけど、各ユーザーのデータ等を鯖で一元管理
CADルームのどのPCを使っても、自分のIDとPWでログインすると自分の環境で使えるとかあった
立ち上がる迄時間が掛かるけど、毎回同じPCを使う必要が無く楽だったよ モバイルユーザホームかな
大学とか一部の編集やらCG部署とかのクリエイティブもそんな使ってた
でかいデータ突っ込んでるのが居たりすると起動のコピーが重くなったりするんで規則が求められる 春に買ったAT-XS910/8で初めての夏を越えた。
10Gファンレスということで身構えていたのだがあっさりと夏を乗り切ってしまった。
うちは家庭用としては負荷がすこし大きめくらいの感じだったが、問題は発生しなかった。 このスイッチ、いいなあとは思うんだがタグvlan対応してるのかな？
仕様見てもよくわからん
https://a.%41liexpress.com/_m0sw4ma sanbootは複数PC利用前提で起動デバイス込みでミラーリングとか考えたときに
全台でhdd二重化しなくていいという超メリットがあるのだ
個人で全く必要なさそうというのはその通りだとは思うが 1Uで2CPUの高密度仮想化サーバーにストレージ積む余裕ないからSANにしたりしてるね 新しいR86SのN100がとどいた
SPF＋2ポートあるけど、独自設計のOCPメザニン準拠っぽい
Intel 82599がPCIe(2.0)x4 で接続されてて帯域が足りなさげ…
これなら旧版のMellanox ConnectX-3 MCX342Aの方がよかった ぴえん >>297
足りないことはないだろ
2port同時に10Gの帯域使う時ってブリッジする時とかルーティングする時くらいだろうけどそこってCPUがネックになってフルに速度でないかと >>299
あれ？
3.0x4は1.6Gbpsだが2.0x4は20Gbpsだろ？ 10b8bだから片方向20GT/sで2GB/sだな。 PCIe 2.0は 8b/10bで5000MT/s
x4で2GB/s=16Gbps
PCIe 3.0は 128b/130bで8000MT/s
x4で3.94GB/s=31.52Gbps へぇ、PCIe2.0でも単ポート10Gは成り立つんだ！ QNAPの10GのLANカードのPCIeは×4だよ。これはPCIe2.0のスロットに挿すことを想定している。 Synologyの21シリーズの一部は
Gen3x8スロット(x4リンク)x1だから
31.52Gbpsってことで
1port25Gbpsまではいけるのか…
2port25Gbpsも帯域をフルに使わなければそこそこいけるか… つべの動画に中華m.2で10GBeなんて出てきたんだけど、そんなのあるんだねぇ >>306
アリエクで買ったAQC107載ったやつ使ってるよ。
ミニPCでも10gbe使えて重宝してる。 >>309
そんなにいるか？WoL。そもそもリモートで使うなら電源切る必要なくない？
十台以上でファーム組んでるとかなん？ ぽまえらバカか？
WoL使いたいならオンボの有線/無線Lanを使えばいいじゃないか QNAPの473Aに刺せる10Gbeのカードで、
・低発熱
・できればファンレス
オススメをお願いします。 >>314
QNAPの純正オプションじゃ駄目なん
10GBASE-Tが2ポートのやつじゃなければファンレスみたいだけど ConnectX-3で使ってるよ。
古いAQC107の使ってたら高負荷時にNICがいなくなってたw 業務用レベルの負荷をかけたらAQC113CSもいなくなるよ。
再起動では復帰せず、電源プラグを抜いて解決した。 ちなみに、QNAPもSynologyも純正10GはAQC107のはず。 業務用というかアレイ組み直しで退避してたデータを書き戻す長時間のシーケンシャルアクセスだったんよな。
ファームもV2時代なのでV4時代のファームでどうかは知らん どうせ温度だろ？ヒートシンクでも貼れば良いんじゃね 熱さよりPCIe v2.1 5.0 GT/s, x8 Lane というのがなぁ… 昔、インテル名乗ってMACアドレスのベンダが別とういのが出回って、それ以来疑われるようになったんだよ。 >>324
>オリオのintel-NIC安いけど本物なのかね?
オリオのIntel NICは、Bulk(保証無)と正規品(保証有)の2種類あるので、要確認 >>326
今はちゃんとMACアドレスも偽装してるらしい オリオのIntel NICは、
Bulk(保証無)
これ良くてチップだけがintel正規品の
中華メーカーのコピー製造＆販売でしょ
正規ドライバーで動きはするけど
intelのサポートは受けられんだろ
正規品(保証有)
こっちも茶箱バルク品だけど
正規代理店品扱いの正規品
Yottamarkコード検証
Intelサイトで保証ステータス確認
がPASSしてintelのサポート受けられる
Intel NICの正規品を小売りで買うとしたら
オリオか、ぷらっとホームぐらいかなぁ… >>329
>正規品(保証有)
>こっちも茶箱バルク品だけど
その茶箱が正規の箱らしい、IntelサポートでT550-AT2新品交換になった時同じ箱で届いた
パソコン工房も同じ茶箱で正規品として販売していた 上のほうでConnect-x4とX710-T2L買った阿呆だけど、
X710-T2Lはオリオで正規品をプライムデーで買ったけど、めっちゃ安定してるわ
(プライムデーはAmazonpayで1％還元)
なお、ipxeからのSunbootでWin11のiscsibootできました。 >>332
結局どちらのNICでsanbootやりました？
自分も無駄に速いNWとファイルサーバあるんでやってみようかと思ったり >>192
だいぶ遅レスだがconnectxのjumboframeのサイズは14足した値な
初期値が1514になってるから想像つくかもしれないけど
だからmtuを9000にしたい場合は9014を設定するといいよ >>>333
レス遅れた
結局X710-T2Lでpxeからipxeをチェインして起動、その後ipxeでsanboot(iscsiboot)してる
1060(6GB)で無事にAi専用環境を構築
connectxはどうやってもDhcpやLANで通信出来なかったので諦めましたw
んで、ipxeでインスコする際にはおま環かもしれんが、winpe系(自分はSynologyのバックアップリカバリディスク)から起動しないと
インスコ出来るデバイスがねぇ!
って怒られて躓きました。
起動後にインストールUsb差してコマンドからsetup.exe実行したらいけました。
(ネットワークドライバをインスコ開始前に読み込ませた方がよさげです。)
X710-T2Lはドライバが無いのかインスコするまではディスクが見えませんでした。
んで、何処かに10の後期verはpagefile.sysが
ネットワーク上に置けないとかなんとか書いてあるページがあったので、win11ですが、自環境では消してますがなんともないです。 >>337
ipxeのチェインブートはsyanologyならpxe用のプログラム配置して指定で簡単でした。
なお、1Gbps環境Raid6(16TB*6)で4kQ1T1以外は100Mb/s 4kQ1T1は20Mb/s位でした。
初速はもっさりだが、読み込むとサクサク >>337
ありがとう
ま、ちょっとだけ挑戦してみるよ
>>338
まあいいじゃん
iSCSI bootって10G以上でようやく快適に使えるようになったやつなんだから完全にスレチじゃないだろ アライドテレシスの10GbEキャンペーンが今月いっぱいで終わる。
AT-XS910/8の今の実売価格も来月以降はどうなるかわからん。
欲しいやつは買っとけよ。 >>341
あれもう終わるのか
ファイバーない環境ならポチったんだけど Wi-Fi 7楽しみだなあ
ようやく10Gbeに光が当たる 1Gb超えててもアップリンクは軽視されてたしどうせ2.5Gが多数でしょ
どうせインターネッツはそんなに出ないのに意味あるのとか言うてる奴に売るんだし wifiとかルーター含めて10gで構成すると200wくらい常時食うけどそんなの普及するのかな ■ このスレッドは過去ログ倉庫に格納されています
