Katae2


ファイルサーバ “かたえ2”

2012年4月ごろサービスイン

概要

種別

  • ファイルサーバ
  • DNSマスタサーバ
  • NW監視サーバ

コンセプト

  • 低コスト : 必要なところにお金をかけ、不要なところは安く済ませる。
  • 耐障害性 : 低コストに見合う耐障害性
  • 高保守性 : 壊れても安く修理できる

特徴

  • CentOS 5.5
    • ・・・これしかなかった。。。
  • FreeNAS : ファイルサーバディストリビューション
    • MBとかCPU壊れてもOSごと他のマシンにすぐ引越できる
    • と思ったら、RAID崩壊メール機能がないので却下
  • WD20EARS x6 xRAID-5 = 10TB
    • 大艦巨砲主義(当時)
    • 癖のあるHD(AFT)だけど、何とかなるだろう。
    • なんとかなってる。
    • 順次WD20EARXに更新中
  • Intel X25-V x2 xRAID-1
    • 熱源排除と3年保証
    • X-25Mに比べて遅いらしいが、Linuxのシステムドライブ用なので問題なし
    • 安いね。

用途

  • NFSサーバ
    • 各Linuxサーバのデータストレージ用
    • 共用ファイルサーバ
  • Samba
    • Windows用ファイルサーバ
  • MRTG
    • NW帯域・サーバ負荷監視
    • 将来的にはZabbixにしたい
  • DNS
    • 外部から直接参照させず、master → slave (Hibaru, Mitoma) 配信専用
  • 10TBwww
    • ちなみに前身のKataeは4TB中2TB使用していた
  • あとは走らせてから考える

いくつか検証した

Intel X25-V x2 xRAID-1 mdadm(RAID-1) x LVM2 x ext4(OSディスク)

Version 1.03e       ------Sequential Output------ --Sequential Input- --Random-
                    -Per Chr- --Block-- -Rewrite- -Per Chr- --Block-- --Seeks--
Machine        Size K/sec %CP K/sec %CP K/sec %CP K/sec %CP K/sec %CP  /sec %CP
Katae2.JamFunk.p 4G 40293  55 46809   5 29068   3 81425  98 157181  10 21258  43
                    ------Sequential Create------ --------Random Create--------
                    -Create-- --Read--- -Delete-- -Create-- --Read--- -Delete--
              files  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP
                 16 56603  99 889330  97 61264  54 52689  99 1273549 101 134357 100

WesternDigital WD20EARS x6 xRAID-5 (ext3) mdadm(RAID-5) x ext3(AFT)(RAID-5なext3)

Version 1.03e       ------Sequential Output------ --Sequential Input- --Random-
                    -Per Chr- --Block-- -Rewrite- -Per Chr- --Block-- --Seeks--
Machine        Size K/sec %CP K/sec %CP K/sec %CP K/sec %CP K/sec %CP  /sec %CP
Katae2.jamfunk.p 4G 71947  99 251110  41 90916  24 72404  89 335575  44 556.9   2
                    ------Sequential Create------ --------Random Create--------
                    -Create-- --Read--- -Delete-- -Create-- --Read--- -Delete--
              files  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP
                 16 22136  94 381397 100 152283  99 23990  98 493358 102 154793 100

WesternDigital WD20EARS x6 xRAID-5 (ext4) mdadm(RAID-5) x ext4(AFT)(RAID-5なext4、当時ext4が遅いという噂があったので検証、大して変わらず)

Version 1.03e       ------Sequential Output------ --Sequential Input- --Random-
                    -Per Chr- --Block-- -Rewrite- -Per Chr- --Block-- --Seeks--
Machine        Size K/sec %CP K/sec %CP K/sec %CP K/sec %CP K/sec %CP  /sec %CP
Katae2.JamFunk.p 4G 71386  98 258348  39 77964  17 78429  93 221015  27 600.9   1
                    ------Sequential Create------ --------Random Create--------
                    -Create-- --Read--- -Delete-- -Create-- --Read--- -Delete--
              files  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP
                 16 57160  99 457334 100 158377 100 70990 100 960426  99 139661  99

iSCSIでネットブートPCを作れるのか?(煩雑になりすぎたのでやめた)
http://okkun-lab.rd.fukuoka-u.ac.jp/wiki/?Tips/Hardware/iSCSI

HW構成

  • CASE
    • VALUEWAVE KUROKO
      • ¥6,980@TWOTOP博多
  • MB
    • ASUS P7P55D
      • # 新古品
      • ¥8,480@じゃんぱら博多
  • CPU
    • Intel Core i7-860
      • # 新古品
      • ¥24,800@じゃんぱら博多
  • memory
    • (OEM) DDR3-1333 PC3-10600 1GB
      • ¥2,770@TWOTOP博多
    • (OEM) DDR3-1333 PC3-10600 1GB
      • ¥2,770@TWOTOP博多
    • Silicon-Power SP004GBLTU133V21
      • DDR3-1333 PC3-10600 240pin DIMM 2GB 2本セット
      • ¥3,980@じゃんぱら秋葉2
  • Interface
    • 玄人志向 SATA2I2-PCIe
      • Sil3132 (SATA II) 2ポート PCI-Express(x1)
      • # 増設SATA(/dev/sd[gh])
      • ¥2,680@ヨドバシMM博多
      • 死亡
    • Interface 玄人志向 SATA3I2-PCIe
      • Marvell 88SE9123 (SATA rev.3 6Gbps)
      • RAID-0,1
      • # 増設SATA(/dev/sd[gh])
      • ¥3,980@あぷあぷ福岡西
  • HDD case
    • CENTURY CERS25-BK
      • SATA 2.5″ 2台収容 3.5″ベイ1段占有
      • # システムドライブ用(オンボードSATA1~2)
      • ¥2,980@ヨドバシMM博多
  • HDD
    • Intel X25-V (SSDSA2MP040G2R5)
      • SATA2 40GB MLC
      • ¥11,000@ヨドバシMM博多
    • Intel X25-V (SSDSA2MP040G2R5)
      • ¥7,980@TWOTOP博多
  • cable
    • RiteUp PS50BK
      • SerialATA2 ラッチ付き 50cm
      • ¥840@ヨドバシMM博多
    • RiteUp PS50BK
      • ¥840@ヨドバシMM博多
  • HDD case
    • CENTURY CWRS3-BK
      • # home用 オンボードSATA RAID-5 接続(3~5)
      • # KUROKO標準固定具では固定できないのでミリネジで固定
      • #HDD認識不良のため交換対応x2→危険すぎてDIRACへ移行
      • ¥8,980@TWOTOP博多
    • DIRAC DIR2131SS
      • 5″ 2bay 3.5″ x3 SATA/SAS closure
      • #home用 オンボードSATA RAID-5 接続(6, 増設IF1~2)
  • HDD
    • WesternDigital WD20EARS
      • # SATA2 3.5″ 2TB AFT
      • ¥11,480@ソフマップ・ドットコム
    • WesternDigital WD20EARS
      • ¥11,480@ソフマップ・ドットコム
      • 死亡
    • WesternDigital WD20EFRX
    • WesternDigital WD20EARS
      • ¥11,480@ソフマップ・ドットコム
  • HDD case
    • CENTURY CWRS3-BK2
      • #home用 オンボードSATA RAID-5 接続(6, 増設IF1~2)
      • #HDD認識不良のため交換対応x2→危険すぎてDIRACへ移行
      • ¥8,980@ヨドバシカメラ博多
    • DIRAC DIR2131SS
      • 5″ 2bay 3.5″ x3 SATA/SAS closure
      • #home用 オンボードSATA RAID-5 接続(6, 増設IF1~2)
  • HDD
    • WesternDigital WD20EARS
      • 検証用として上の3台買った後、2週間で価格下落でこの価格。
      • ¥9,880@TWOTOP博多
    • WesternDigital WD20EARS
      • ¥9,880@TWOTOP博多
    • WesternDigital WD20EARS
      • ¥9,880@TWOTOP博多
  • cable
    • (OEM) ケーブル SATA 2.0 50cm ラッチ付き 3本セット
      • 中古
      • ¥100@あぷあぷ西福岡
    • (OEM) ケーブル SATA 2.0 50cm ラッチ付き 3本セット
      • 中古
      • ¥100@あぷあぷ西福岡
  • PSU
    • abee S-500ED
      • ¥7,980@TWOTOP博多
      • 死亡
    • Seasonic(owltech) SSR-650RMS
      • 650W, plug-in, 80 PLUS GOLD
  • VGA
    • NEC MGA-MIL/4/NEC2
      • #CUIしか使わないので超低性能超低発熱
      • (寄贈)
      • 死亡
    • (ブランド不明) GeForce 7100 GS
      • (寄贈)