Linux iSCSI 友の会

1 ：login:Penguin：2007/09/14(金) 15:13:49 ID:+fo3Eq3t

貧乏人でもiSCSIが使用可能なLinux-iSCSIについて語ろう。

FreeNASよりも高速、クラスタ対応のファイルシステムを使えば共有も可能。
NFSよりも圧倒的に高速です。

The iSCSI Enterprise Target Project
http://iscsitarget.sourceforge.net/

473 ：login:Penguin：2009/10/14(水) 22:14:02 ID:CDgM3BwZ

ietdでblockio使ったらsambaよりは断然早いけど、CPUがプアだと
まだまだ遅いですね。

474 ：login:Penguin：2009/10/14(水) 22:28:26 ID:vmv5MAGQ

亀レスだけど
infinibandはスイッチが必須じゃない？
subnet managerが存在するスイッチネットワークが必要だと思った
でもIBスイッチ安いよ。10GEより全然コスパいい
ちなみにiSERはメモリにアクセスしてるうちは速い
前試したときは500MBpsは出てた
リード、ライトともにね

475 ：login:Penguin：2009/10/16(金) 00:58:51 ID:mQNvovOU

>>474
OpenIBに含まれるopensmを起動しておけばOK。
switchless infinibandでぐぐると幾つか出てくるよ。

現状は低遅延広帯域ネットワークはInfinibandがベストだね。
CEEが複数ベンダから安いアダプタとスイッチが出てくるようなら、
将来は次点になるかもしれないけど、ちょっと難しそう。

476 ：login:Penguin：2009/10/16(金) 11:28:38 ID:f/BQ9Mf5

>>475
スイッチレスで組めるんだ
知らなかったよ、ありがとう
RDMAoCEEが動くようになれば10GEて選択も出てくるね
RDMAエンジン搭載のCEE NICがまだ無いけど
でもTCPベースのiSCSIにも言えることだけど、
キャッシュ同期が取れる冗長が組めないと
危なくてテンポラリな空間にしか使えないよね
商用はそこ解決してるわけだけどさ

477 ：login:Penguin：2009/10/17(土) 02:43:55 ID:j9nQlXrE

Infinibandって10GbEより圧倒的に安いんだね
超ハイエンドかと思ったが、いつの間にか部署内のサーバ間接続用なんかに
ちょっとした経費で買えそうな位まで安くなってるので驚いた
とりあえずスイッチレスで試すのに2枚買ってみようかな

iSERってiSCSIとワイヤレベルでのプロトコルが違うんだよね？
ターゲットもイニシエータも対応した奴を用意しないとパフォーマンスが出る出ない
以前に通信できないってことでおｋ？

478 ：login:Penguin：2009/10/17(土) 08:54:07 ID:E2DiCTRI

>>477
> ターゲットもイニシエータも対応した奴を用意しないとパフォーマンスが出る出ない
> 以前に通信できないってことでおｋ？
Yes、TCPは使わないです
リモートホストのメモリに直接アクセス(RDMA)するんだけど、
RDMAのRead/WriteがSCSIのRead/Writeに相当する
iSERに対応してるのは今のところ、LinuxとOpenSolarisくらいかなあ
けどiSER評価するなら、NFS/RDMA使ったほうがいいかもよ？
そろそろLinux版がGAになるし、一番簡単
RDMA使ったストレージアクセスって、iSERもSRPもNFS/RDMAも
大してパフォーマンス変わらないもの

あと、日本語ドキュメントが皆無だから頑張ってね
How toだけなら公式wikiとかバンドルされてるドキュメントで何とかなると思う
IBの日本人エンジニアなんてほんとレアだしさ
FCと同じで案件（金）が絡まないと情報出てこないのよ

479 ：login:Penguin：2009/10/17(土) 10:32:48 ID:rx/kYc3S

情報が少なすぎて、
「試しに買ってやってみるか」にはならないんだよな

FCなら、繋いで、インターフェースのBOOTROMで設定すれば、
あとは/dev/sd?で見えるようになって使えると思ったけど。

480 ：login:Penguin：2009/10/17(土) 10:57:04 ID:29d+cIdh

9割がクラスタ案件だからね
入札出来るベンダも限られるし
飯のタネのノウハウは漏らさないだろうね
でもオープンな情報も多いから
英語読む気があれば色々ためせるよ

スレの本スジから外れてきちゃったね
他に行くところも無いんだけど

481 ：login:Penguin：2009/10/17(土) 22:51:09 ID:qYCt/TXA

InfiniBandでスレ立てていいと思う。
情報が分断する気もするけど、
iSCSIとは直接関係ないしw

482 ：login:Penguin：2009/10/17(土) 23:20:03 ID:9cTcAdGM

やっとiSCSIのスレを見つけた…

普通のPC、またはサーバ用のOS（？）で、
そのインストールしたPCをiSCSI用のストレージとして
認識させることの出来る奴の名称、誰か知ってたら教えてくださいorz

先月くらいにちょろっと見て、後で検証してみようと思ったんだが、
名前ど忘れ＋ググっても出てこないｏｒｚ

483 ：login:Penguin：2009/10/17(土) 23:21:05 ID:qYCt/TXA

>>482
>>1 ?

484 ：login:Penguin：2009/10/17(土) 23:31:30 ID:9cTcAdGM

>>483
ありがとう。
確かにコレでも同じ事出来るな、どこ見てんだ俺はｏｒｚ

でも名前が違ったような気がするんだよなぁ…
仕様見に行ったときもっとグラフィカルなサイトだった気がするし
とりあえず>>1を試してみる、ありがとう！

485 ：login:Penguin：2009/10/18(日) 00:00:23 ID:/Qo2jBjR

>>484
Openfilerかな？
ttp://pc11.2ch.net/test/read.cgi/mysv/1231469122/

486 ：login:Penguin：2009/10/18(日) 01:33:29 ID:b+V3NSIx

Windowsで気軽に使えるクラスタファイルシステムマダー（・∀・ ）っ/凵 ⌒☆ﾁﾝ

487 ：login:Penguin：2009/10/18(日) 03:21:13 ID:DffD1WZE

>>484
sstorageかな？
http://storage.isp.jp/

488 ：login:Penguin：2009/10/25(日) 15:33:40 ID:qTGYyK7q

次は10GbEが欲しくなる。

489 ：login:Penguin：2009/10/25(日) 21:26:23 ID:DdsJmjpm

飽き足らずにInfinibandが欲しくなる

490 ：login:Penguin：2009/10/28(水) 20:15:47 ID:/CZ6VZy0

10GbEは意外と安くならないね

491 ：login:Penguin：2009/10/28(水) 20:44:55 ID:uXsj3Jvl

来年からIntelはオンボ10Gにするらしいけどね。
問題はL2スイッチが直ぐには安くなりそうもないこと。

492 ：login:Penguin：2009/11/02(月) 16:35:14 ID:KNufd3Mp

iSCSI用途に限らないんだけど、今のLinuxで10Gのカードって
ノウハウ的にどこがおすすめ?

Intel,Broadcom,Chelsio,MallaoxあたりとBladeNetworksの
24portスイッチをつなげてみようかと思うんだけど。

493 ：login:Penguin：2009/11/02(月) 16:41:12 ID:BWYuO9b/

ノウハウ的って意味が正確には判らないけど、
自分とこではChelsio買った部署があるな。
HPC屋が推してたらしい。

494 ：login:Penguin：2009/11/02(月) 17:56:11 ID:KNufd3Mp

>>493
39s。阿鼻叫喚はとりあえず聞こえてきていないということですね。

495 ：login:Penguin：2009/11/02(月) 21:01:05 ID:BWYuO9b/

とりあえず阿鼻叫喚は聞こえて来ないから、マトモに動かないと
いうことは無いんじゃない？
ただし、ToEはカード上で処理できるセッション数を超えた途端に
ホストCPU処理になってしまうため、用途によってはトラフィックごとに
アダプタを別けざるを得ず、ケーブリングでハマると聞いたことが
あるので、その辺は実際のワークロードをかけて幾つかの製品を
試したほうがいいと思う。
最近はCEEだ何だと言われる位なので、各社問題無くなってるのかも
しれないけど。

496 ：login:Penguin：2009/11/03(火) 18:20:41 ID:hEI0AGsP

ToEってなに？

497 ：login:Penguin：2009/11/03(火) 18:34:26 ID:0lf5dDD8

TOE == TCP Offloading Engine

単に"o"にツッコミたかった？

498 ：login:Penguin：2009/11/03(火) 19:26:31 ID:hEI0AGsP

なんだTOEのことかよ

499 ：login:Penguin：2009/11/04(水) 19:33:51 ID:pPw0VwW9

安NASでもtargetサービス有になってきてるんか
http://bb.watch.impress.co.jp/docs/news/20091104_326288.html

500 ：login:Penguin：2009/11/05(木) 00:29:03 ID:eTYM/A9G

>>499
こんな信頼性もパフォーマンスも無さそうなTargetの
使いどころが正直判らん。
VMwareとかHyper-Vとかのライブマイグレーションの練習用？

501 ：login:Penguin：2009/11/05(木) 08:59:28 ID:8YM/bsDi

>>500
練習だったら自分で組んだ方が早いわな。

502 ：login:Penguin：2009/11/05(木) 12:52:00 ID:uAt1KcU0

ソフトウェアによるイニシエータ/ターゲットの存在を
知らない人も世の中にはいるんだよw

いや、マジで。

503 ：login:Penguin：2009/11/06(金) 00:12:16 ID:a7mq1JSi

>>502
そんな人がVMwareとかHyper-Vでシステムを仮想化とか、無茶じゃないか？
一人でVMware Player使うとかいうのとはわけが違う。

504 ：login:Penguin：2009/11/06(金) 03:27:31 ID:xbeOQXg2

>>503
> そんな人がVMwareとかHyper-Vでシステムを仮想化とか、無茶じゃないか？
> 一人でVMware Player使うとかいうのとはわけが違う。
そんなに違うか？
所詮単なる道具だぜ？

505 ：login:Penguin：2009/11/06(金) 08:57:28 ID:qWrsNhC4

>>504の意見に賛同

>>503は勘違い選民思想チビデブハゲってことでおｋ？

506 ：login:Penguin：2009/11/06(金) 13:09:44 ID:ER2qYO7r

>>503
文章読解力がないようだが、>>502は>>500-501に対するresだ。
つまり「信頼性もパフォーマンスもなさそうなTarget」の存在意味。
仮想化云々はまったく関係ない。

iSCSIは従来のSCSI同様
専用のHBAと専用の機器の組み合わせで使うものだ
と思い込んでる人もいる、とゆー話。

# いや、某中古サーバ専門店の店員が。
# マジ驚いたよw

507 ：login:Penguin：2009/11/06(金) 20:56:28 ID:TNWw1idW

ぉっと

508 ：login:Penguin：2009/11/07(土) 13:51:56 ID:y30cOxiX

iSCSI HBA使うメリットって今あんのかな？
8GFCのスイッチとHBAの価格が4GFCと大して変わらんくらいまで落ちてきてんだよね

509 ：login:Penguin：2009/11/13(金) 11:39:49 ID:N9FS5vq1

あるPC（Windows7）からiSCSIでマウントしてるディスクを
別PC（XP）からSambaでファイル共有して同時に読み書きってできるのかな

510 ：login:Penguin：2009/11/13(金) 23:11:58 ID:WRG9kpVK

iSCSIは、SCSIであって、使い方はSATAやSASとほぼ一緒

なので、iSCSIをマウントしたPC/鯖とsambaで共有すればいい。

511 ：login:Penguin：2009/11/13(金) 23:52:51 ID:f6I0Q3Z0

>>510
レスありがとうございます

この例はあぼーんするが
[PC1:Win7/NTFS] <---iSCSI---> [NAS鯖:Linux/EXT3] <---iSCSI---> [PC2:Win7/NTFS]

この例は大丈夫ってことですね
[PC1:Win7/NTFS] <---Samba--->
[PC3:XP/NTFS]　 <---Samba---> [NAS鯖:Linux/EXT3] <---iSCSI---> [PC2:Win7/NTFS]
[PC4:XP/NTFS]　 <---Samba--->

512 ：login:Penguin：2009/11/14(土) 00:21:38 ID:+VAB2Vbe

どっちがどっちだ？

iSCSIはブロックデバイス、sambaはファイルシステム

ブロックデバイス(HDD)を適当なファイルシステムでフォーマットして
sambaで共有させれば、結果的にiSCSIの中にあるファイルを共有したことになる。

iSCSIのイメージをsambaで共有しても、HDDイメージファイルを共有したことにしかならない。

513 ：login:Penguin：2009/11/14(土) 01:43:55 ID:VYhG1dBU

>>512
NAS鯖
・24h常時稼動
・iSCSI Target（物理ストレージ側）
・Sambaファイル共有サーバー

PC1〜4
・電源ON/OFFのある完全なクライアントPC
・iSCSI Initiator
・Windowsファイル共有クライアント（Windowsファイル共有サーバーの設定はせず）

他PCがマウント中のHDDイメージの中身を、NAS鯖自信ならば読み書きできると勘違いしました
あくまでHDDイメージなんですね

514 ：login:Penguin：2009/11/14(土) 01:49:18 ID:VYhG1dBU

>>511の上の例では、
NAS鯖内に複数の異なるHDDイメージを作成して、
それぞれマウントすればあぼーんすることはないが、
同一のHDDイメージをマウントするとあぼーんするわけですね

>>511の下の例では
PC2がマウント中のHDDイメージを、NAS鯖がマウントするとあぼーんするから、
PC2をWindowsファイル共有サーバーにする方法しかないと理解しました
経路も迂回するし、PC2が電源OFFの時は読み書きできずとうまくいかないもんですね

515 ：login:Penguin：2009/11/14(土) 02:28:02 ID:BeeV1uH3

クラスタファイルシステムでも使えばよろし。

516 ：login:Penguin：2009/11/14(土) 11:14:06 ID:uNeLWaHl

クラスタファイルシステム何種類かあるけど一番有力なのはどれだろう
Windowsでも一つくらいサポートしてもいいような

517 ：login:Penguin：2009/11/15(日) 15:16:24 ID:ePzVhxKF

iSCSIをocfs2で使うのと、
iSCSIをサーバのどれかがNASになってNFS/SMBで共有するのは
どちらが性能いいのかな。Linuxのみで使うとして。

518 ：login:Penguin：2009/11/17(火) 06:14:39 ID:a96ySKqK

ん？HDDイメージの場合、Targetとしてマウント中でも
HDDイメージそのものはそれがおいてある物理HDD上で
コピーしたりすることはできるよね？

519 ：login:Penguin：2009/11/17(火) 06:45:30 ID:Pxf5jnD2

できるけど・・・・
イメージの前半と後半でコピーした時間が違うなんてことになるぜ

>>517
ocfs2は、CPU負荷が高くなると、同期・調停信号が遅れて、
ファイル壊れるとか消えるとか色々変な事が起きる。
ので、smbで済むような用途ならsmbの方が良い。
タイムスタンプの精度が必要とか、
inodeの値まで揃える必要があるような場合だとocfs2

520 ：login:Penguin：2009/11/17(火) 19:05:11 ID:1HFYnidh

>>516
Windowsで使えるクラスタファイルシステムだとOCFSくらいじゃね？

521 ：login:Penguin：2009/11/18(水) 00:58:59 ID:rJYbboFq

認識があってるかも分からんが
linuxのkernel-stageに /fs/dst つ〜ブロックデバイスのネットワークプロトコルが入ってた
nfsの替わりもあってpohmelfsというらしい

5年後に名前が残ってるかさえわからんが…

522 ：login:Penguin：2009/11/18(水) 07:54:19 ID:FFt/LoHq

>>518
それがやりたい人はSolaris使ってZFS pool上にiSCSI targetを構築しましょう。