【Debian】 Nexenta OS 【OpenSolaris】

poolは1TBx10(raidz2)+SSD(ZIL)

nmc@nexenta:/$ zpool list
NAME SIZE ALLOC FREE CAP DEDUP HEALTH ALTROOT
dset 9.06T 878G 8.21T 9% 1.00x ONLINE -

CPU Xeon(R) CPU E31240 @ 3.30GH
Memory size: 16109 Megabytes

ストレージを集約しようとしてるので、少々オーバースペック気味になってます。

詳細ありがとうございます。
うちと似たような構成なんだけどこの差は何なんだろう。
Diskが10台のRaidZ2+ZILで、CPUがX3460とメモリが32GBくらいの差なんですが・・・。
環境の違いはvolblocksizeが4kなのとシンプロビジョニング使ってる所がネックなのか

sataカードはどこのですか？ > お二方

>>208
自分はスピード出てない方ですが、LSIのLSI 9211-8i x2ですね。

安いカード探してるならIBMのM1015とかが同等品にできますよ。
http://lime-technology.com/forum/index.php?PHPSESSID=3ab9b2dd7ce6b95864de400b6829fb0f&topic=12767.msg124393#msg124393
この辺を参考にすれば簡単かと

>>209
LSI9211-8iのカードは初期状態でRAID対応Firmwareが入ってたと思うんですが
ZFS的には非RAIDなFirmwareに上書きした方がいいのでしょうか。

ちなみに私の環境
NEC GT110b
MEM : 1GB ECC x4
SATA1 : 160GB (GT110b標準) : NexentaStor C.E. 3.1.1
9211-8i : Port1-6 : TOSHIBA MK3265GSX 2.5/320GB/5400rpm
9211-8i : Port7 : ANS-9010 16GB (ZIL)
9211-8i : Port8 : 無し (L2ARC用に東芝SSDを予定)

>>210

うちはIT(HBA)Firmに書換はしてます。

RAIDファームではないのは以下のサイトの記述みたので。
http://ftp-admin.blogspot.com/2009/10/zfsraid.html
あと、海外のサイトとかでもIT Firmに書換してる事例が多かったのもあります。

そちらの環境のZILがANS-9010って速そうなんですが、実際どの位速度でてます？

9211-8iとIntelのオンボードSATAを混ぜてます。
ファームは書き換えてませんね。

他のマシンから9260-8iをひっぺがしてみようかと考えましたが、MSMとか使えませんよね。
9201-16iの方がいいかな。

カードは同じなんですね。
オンボードだけで sata6Gが6個もあるへんなITXがあったので使ってますが、
早くない。 3Tx3と最小構成なのでしょうがないかなあ。
3Tもう一本くらい買いたいけど今はムリだ〜〜〜〜〜

>>212
NexentaでもMSMは動きそうな気はしますが、必要な物入れるのが大変そうです。
楽なのは9201-16iだと思いますよ。もしくは、SASエクスパンダー入れるかですね。

>>213
J&WのAMDのITXですかね？
うちは拡張カード刺すつもりだったので、最初からATXにしました。
速くないって、どのくらいなんでしょ？ ZIL用のSSD追加すると結構パフォーマンス
変りますよ−。

>214
asusの E35M1-I です。deluxなしのやつ。
速度はのちほど。
ZILは手持ちのを一度つけたんですが腐ってたみたいで時々挙動不審になるので
別のを注文中です。

CDMなので、比較にならないでしょうが、こんなもんです。
raidz1 WDC 3Tx3 syspoolは Crucial M4 128G 圧縮なし。 cacheなし、
-----------------------------------------------------------------------
CrystalDiskMark 3.0.1 x64 (C) 2007-2010 hiyohiyo
Crystal Dew World : http://crystalmark.info/
-----------------------------------------------------------------------
* MB/s = 1,000,000 byte/s [SATA/300 = 300,000,000 byte/s]

Sequential Read : 59.181 MB/s
Sequential Write : 65.651 MB/s
Random Read 512KB : 58.378 MB/s
Random Write 512KB : 39.962 MB/s
Random Read 4KB (QD=1) : 7.255 MB/s [ 1771.3 IOPS]
Random Write 4KB (QD=1) : 6.275 MB/s [ 1532.1 IOPS]
Random Read 4KB (QD=32) : 61.498 MB/s [ 15014.2 IOPS]
Random Write 4KB (QD=32) : 2.126 MB/s [ 519.1 IOPS]

Test : 1000 MB [X: 11.6% (631.1/5454.7 GB)] (x2)
Date : 2011/11/09 21:28:31
OS : Windows 7 SP1 [6.1 Build 7601] (x64)

214(207)ですが、うちでCDM取るとこんな感じです。
Nexentaとの接続がInfiniBandのうえにARC上に乗っかってるので、読込はこれくらいでます。
書込はスペックからするとおっっっそいっすね。これでもZILにPX-128M2P使ってるんですが。

-----------------------------------------------------------------------
CrystalDiskMark 3.0.1 x64 (C) 2007-2010 hiyohiyo
Crystal Dew World : http://crystalmark.info/
-----------------------------------------------------------------------
* MB/s = 1,000,000 byte/s [SATA/300 = 300,000,000 byte/s]

Sequential Read : 1154.275 MB/s
Sequential Write : 123.507 MB/s
Random Read 512KB : 968.508 MB/s
Random Write 512KB : 113.761 MB/s
Random Read 4KB (QD=1) : 66.573 MB/s [ 16253.1 IOPS]
Random Write 4KB (QD=1) : 17.650 MB/s [ 4309.0 IOPS]
Random Read 4KB (QD=32) : 899.634 MB/s [219637.1 IOPS]
Random Write 4KB (QD=32) : 36.698 MB/s [ 8959.5 IOPS]

Test : 1000 MB [D: 41.7% (4273.6/10239.9 GB)] (x5)
Date : 2011/11/10 0:26:01
OS : Windows Server 2008 R2 Datacenter Edition (Full installation) SP1 [6.1 Build 7601] (x64)

高速化したいときはZILとL2ARC？
どの程度速くなるものなんでしょう

>>218
用途はiSCSIのTargetでしょうか？ 用途によって変ってくるので何とも言えないです。
ZILをSSDへ独立させてやると、SSDの最高書込速度の7〜8割くらいの速度はでます。
細かいブロックサイズ(4KBとか)になると、SSDのそのブロックサイズでの速度くらいまで落ちますが。

一般的な話だと、読込高速化(L2ARC)か書込高速化(ZILデバイス追加)って感じです。
通常、読込高速化はメモリを増やしまくればL2ARCはいらない気がしますけど。
DB系を動かすとなると、L2ARCがあった方が断然速くなると思います。

書込はZILをdisableにすると速くはなりますよ。
標準設定だと、ZILはstandard設定なのでそれをdisabledにするとパフォーマンスはでます。
電源断が起こると、下手すると巻き戻りが起こりますけど。

あと、自分が弄ってきた経験上は、最終的に書込むDiskの速度が遅いとZILのデバイスがいくら速くとも、
Diskの速度に引っ張られます。

現行のzilの動作ですけど、どーなってるんだろうと思って一回テストしてみたんですが、
sync = always (常にZILを書く)
sync = standard (同期書込時だけZILを書く)
sync = disabled (同期書込時もZILを書かない)
になってるっぽいです。

あら。スレあったんだ。前探したときは見つけられなかったんだが

NexentaStor community edition で 1Tx3 で RaidZ を組んで１年半。


NexentaStor　は場違いであればお許しを。

>>220
全然スレ違いじゃないと思うよｗ
このスレはNexentaStor使ってる人の方が多いしｗ

Coreの方を使ってるのは、自分以外は誰かいるんだろうかｗ

そういや、illimosベースの4.0のベータテスターの募集してたけど、
誰か突撃した人はいるんだろうか？

FreeBSD の ZFS と nexenta の ZFS の性能的な違いとかって
両方使っている人がいたら感想を教えてもらえるとありがたいです

>>222
以前FreeBSD(ZFSGuru)とnexentaで比較やったんだけど、結果が残ってない orz
GbE+iSCSIのサーバとかで使うんだったら、差は殆どないかと。

Nexenta の一時バックアップを、VM 上に作った FreeBSD 9RC でとってみたが、
ZFS としての使い勝手は当たり前だが同等。
ハードが異なるので比較はできないがメモリをたっぷり割り当てている分には違いは出なかった

Nexenta のほうで、Dedup ON にしているとメモリが足りないと警告が出るが、
FreeBSD では出なかった。出ないからと言って、メモリが足りないわけではないだろうけど

FreeBSD側の枯れ具合いくらいなのかな，違いは．

当方は，えんたーぷらいずってわけでもないので
あとはスピードとかだったのだけどまあ
zfsにあまりスピードを求めるというのも違うきもする…

206です。
出勤前にCDMでベンチ取ってみました。
遅いですねえ、>>217にはとても及ばず。
1GbなiSCSIじゃこんなものですかね。
-----------------------------------------------------------------------
CrystalDiskMark 3.0.1 x64 (C) 2007-2010 hiyohiyo
Crystal Dew World : http://crystalmark.info/
-----------------------------------------------------------------------
* MB/s = 1,000,000 byte/s [SATA/300 = 300,000,000 byte/s]

Sequential Read : 175.891 MB/s
Sequential Write : 89.339 MB/s
Random Read 512KB : 125.079 MB/s
Random Write 512KB : 52.436 MB/s
Random Read 4KB (QD=1) : 7.264 MB/s [ 1773.4 IOPS]
Random Write 4KB (QD=1) : 9.104 MB/s [ 2222.6 IOPS]
Random Read 4KB (QD=32) : 165.056 MB/s [ 40296.8 IOPS]
Random Write 4KB (QD=32) : 23.892 MB/s [ 5833.0 IOPS]

Test : 1000 MB [D: 0.1% (0.1/100.0 GB)] (x5)
Date : 2011/11/21 5:36:02
OS : Windows Server 2008 R2 Enterprise Edition (Full installation) SP1 [6.1 Build 7601]

自分が使ってるNexentaCoreがEOLに orz

NexentaStorはEOLじゃないからそっち使ってる人は安心してねん。

時代はStormOSか...

まじ？そういう企業は信用できんなあ。

Coreは元々フリーで無保証って書いてたから仕方無い。
Ubuntuの8.04 Desktopベースだから、大元のサポートが今年の4月に切れてるしな。
iCoreへの移行で人手が足らないのもあるんだろうなー

NexentaStorのEEとCEはちゃんとサポートしてるから信用はして良いと思うが。

再インスコとか手間すぎるぜ・・・

>>231
DebianとかUbuntuみたいにアップグレードできるようにするみたいだから、再インスコまではしなくて良いと思うよ。

aptが404でこけるんだが、何があったんだ？？

ComunityEdition も、今年に入ってから Upgrade に失敗するようになったな

ああ、潰れたから

あぁつぶれたのか。そうかそうか。じゃぁしょうがないね。> 235

ttp://www.nexentastor.org/boards/1/topics/4587
日本時間１８日深夜に直った模様。

うちも直ったわ（当たり前だが
そしてupdateパッケージがあるな。rebootしたくねーんだがどうしようか

Coreはillumos+debianのIllumianになったみたいね

NexentaStorでiostat -EnしてもSerial Numberが全部空っぽなんだが、私だけ？

NexentaStor Version 3.1.3 Released: Download today

zfs+crossbow鯖を立てたくてOiかNexentaStor/Coreのどれかを検討中です。

zfsは問題ないとして、Nexentaのcrossbow対応状況ってどんなもんでしょ？

>>241
NexentaStorは、NASの専用なのでCrossbowは簡単には出来ないと思う。
元々Solaris系触った事あるならOIで、Debian系になれてるならillumianかな。
NexentaCoreはサポートが切れてるのでお勧めしない。
後継のillumianを使ったほうが良いと思う。

>>242
なるほどありがとうございます。illumian検討してみます。
myriの10GBase-cx4カードが思いがけず入手できそうで、
Crossbowで内部的に繋ぎこんでなんちゃって10GBaseスイッチにできないかな〜と

Nexentastor.orgでOpenStrageSummit記念の自作コンテスト開催中。10/25〆切
http://www.nexentastor.org/boards/12/topics/7912

公式ではなくてコミュニティの内輪イベントみたい。
自作PC晒しスレのノリなんだけど、自分は英語で文章書けないから無理ぽ。

3.1.3.5 release.

公式フォーラムに、

内部ベータは通ったから、近いうちに公開ベータ出せるんじゃね？来週あたりか？

って書き込みあったんだけど、NexentaStor4.0期待していいの？

illumosベースのベータ版が出たみたいだね

New Public Beta: NexentaStor Community 4.0 milestone 20
http://nexentastor.org/boards/13/topics/8785

4.0のmilestone24出た

出たのはいいんだがフォーラムの投稿記事読んでると、Nexenta社やコミュニティの先行きが不安になってくる。
ZFS on Linuxに皆流れていってるのかな？

>ZFS on Linuxに皆流れていってるのかな？
Free-BSD じゃないかね？

0.6.1でRH系のレポできたから一斉に行ったんじゃないの
BSDなら今更行くかだし

3.1.5 release.
4.0も開発は進んでるから期待してろよ、とかなんとか。

age

4.0 正式版が出てるよ

http://www.dell.com/learn/jp/ja/04/campaigns/dell-nexenta-storage
いつから売ってるんだ？w

http://itpro.nikkeibp.co.jp/atcl/news/14/082000503/