14 块硬盘,总 40t,有什么办法变成集中的存储 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
请不要在回答技术问题时复制粘贴 AI 生成的内容
sjmcefc2
V2EX    程序员

14 块硬盘,总 40t,有什么办法变成集中的存储

  •  
  •   sjmcefc2 2019-04-07 09:57:12 +08:00 9660 次点击
    这是一个创建于 2389 天前的主题,其中的信息可能已经有所发展或是发生改变。

    集中的方案哪种比较好呢?

    70 条回复    2019-04-08 15:21:54 +08:00
    sjmcefc2
        1
    sjmcefc2  
    OP
       2019-04-07 09:57:35 +08:00
    主机通过网络访问?
    Kilerd
        2
    Kilerd  
       2019-04-07 09:59:16 +08:00 via iPhone
    用了 raid 组起来?
    StarRED
        3
    StarRED  
       2019-04-07 09:59:33 +08:00 via Android
    这么多。。。
    sjmcefc2
        4
    sjmcefc2  
    OP
       2019-04-07 09:59:47 +08:00
    @Kilerd 到哪里找这么多硬盘位的机箱?
    luozic
        5
    luozic  
       2019-04-07 10:02:17 +08:00 via iPhone
    存储服务器,san
    sjmcefc2
        6
    sjmcefc2  
    OP
       2019-04-07 10:03:43 +08:00
    @luozic 一般有什么型号。
    sjmcefc2
        7
    sjmcefc2  
    OP
       2019-04-07 10:05:04 +08:00
    @sjmcefc2
    @luozic 然后怎么用呢?主机通过网络挂硬盘?可靠不?
    sjmcefc2
        8
    sjmcefc2  
    OP
       2019-04-07 10:05:32 +08:00
    @StarRED 闲置下来的。。。。
    scalaer
        9
    scalaer  
       2019-04-07 10:10:59 +08:00 via Android
    hdfs?
    awebc
        10
    awebc  
       2019-04-07 10:12:17 +08:00 via Android
    @yunsong 为什么会有这种操作
    w2exwh
        11
    w2exwh  
       2019-04-07 10:14:16 +08:00 via iPhone
    我们最近也在弄这种方案
    sjmcefc2
        12
    sjmcefc2  
    OP
       2019-04-07 10:15:44 +08:00
    @w2exwh 有什么比较好的方案吗,分散在各个主机确实有点不好利用,
    sjmcefc2
        13
    sjmcefc2  
    OP
       2019-04-07 10:17:40 +08:00
    都是普通 pc server 本身盘位有限,又分散,不好弄,想着能够 pc server 就弄个系统盘 ssd,其他的都通过网络,不知道行不行。
    w2exwh
        14
    w2exwh  
       2019-04-07 10:18:33 +08:00 via iPhone
    准备先虚化 然后搭建 HDFS
    sjmcefc2
        15
    sjmcefc2  
    OP
       2019-04-07 10:23:33 +08:00
    @w2exwh 有部分也是想着做 hadoop ;有些想着还是物理主机,不知大家有何妙招
    Flasky
        16
    Flasky  
       2019-04-07 10:33:59 +08:00 via Android
    前几天刚看到一款中塔机箱 10 个硬盘位的
    tony601818
        17
    tony601818  
       2019-04-07 10:34:35 +08:00
    有钱 RAID,没钱 HDFS
    hellojinjie
        18
    hellojinjie  
       2019-04-07 10:36:53 +08:00
    淘宝上,dell 2U 的 N 手服务器才 1000 块啊,有 12 个盘位,足够组 raid 了
    sjmcefc2
        19
    sjmcefc2  
    OP
       2019-04-07 10:44:09 +08:00
    @hellojinjie 吵吧
    @Flasky 推荐一把?
    @tony601818 HDFS 可以?硬盘带下不同,3t,4t 都有
    whatever93
        20
    whatever93  
       2019-04-07 10:45:39 +08:00 via Android
    ceph ?
    mchong
        21
    mchong  
       2019-04-07 10:51:31 +08:00
    淘宝有监控服务器机箱,买一个跑 zfs 吧
    47jm9ozp
        22
    47jm9ozp  
       2019-04-07 10:53:03 +08:00
    最便宜的方案大概是……买四台蜗牛星际矿渣,加一个交换机,组 ceph

    大概成本 1000 左右
    opengps
        23
    opengps  
       2019-04-07 10:54:06 +08:00
    raid0,不过数据太危险了
    yingfengi
        24
    yingfengi  
       2019-04-07 11:07:20 +08:00 via Android
    蜗牛矿渣也才 4 个盘位,你这个有点难啊。可能要找找机架式的服务器了,专门做存储的那种,但是价格嘛。。。emmmm
    Flasky
        25
    Flasky  
       2019-04-07 11:07:26 +08:00 via Android
    @sjmcefc2 tb 搜硬盘机箱,第二个就是
    luozic
        26
    luozic  
       2019-04-07 11:15:36 +08:00 via iPhone
    有没有足够的钱,有钱,上 fcsan,没钱上存储服务器,再没钱上多硬盘支持的服务机框。 再没钱,nas 欢迎你,
    MonoLogueChi
        27
    MonoLogueChi  
       2019-04-07 11:22:16 +08:00 via Android
    买一张 raid 卡,一般一张卡可以拖 10 块硬盘
    tony601818
        28
    tony601818  
       2019-04-07 11:28:14 +08:00
    @sjmcefc2 HDFS 不就是 Hadoop,那个没限制,但是组起来比 RAID 烦
    Tarkky
        29
    Tarkky  
       2019-04-07 11:28:26 +08:00 via Android
    zfs,raid z3
    Tarkky
        30
    Tarkky  
       2019-04-07 11:31:06 +08:00 via Android
    joesonw
        31
    joesonw  
       2019-04-07 11:32:42 +08:00
    一个存储服务器(最大的有 40 盘位的), 用 10Ge 和 pc 连起来就好咯.
    hmmm
        32
    hmmm  
       2019-04-07 11:33:03 +08:00 via iPhone
    群晖了解下?
    sjmcefc2
        33
    sjmcefc2  
    OP
       2019-04-07 11:41:55 +08:00
    主要还是没钱。。。。。所以群晖啥的太贵了。。。就想着用 b85m-f plus 的主板搞一个可行的。

    @tony601818 hdfs 我也觉得麻烦,而且估计也别想着升级了。组件太多了
    @Tarkky zfs 倒是有好感,就是硬件啊怎么拼?还是 dell 二手?
    组完了,怎么挂到各种操作系统下呢?
    sjmcefc2
        34
    sjmcefc2  
    OP
       2019-04-07 11:44:35 +08:00
    @MonoLogueChi 买一张 raid 卡,一般一张卡可以拖 10 块硬盘 盘住哪里?露宿?
    yjd
        35
    yjd  
       2019-04-07 11:44:57 +08:00 via Android
    esxi vsan
    xuhaoyangx
        36
    xuhaoyangx  
       2019-04-07 11:47:09 +08:00
    zfs ceph hdfs
    sjmcefc2
        37
    sjmcefc2  
    OP
       2019-04-07 11:48:40 +08:00
    @Tarkky 这个看起来很棒,不过硬件要什么呢?
    sjmcefc2
        38
    sjmcefc2  
    OP
       2019-04-07 11:51:27 +08:00
    想在想来,一个是硬件好扩展,一个是软件系统如何挂到主机上?
    实在不太懂。
    sjmcefc2
        39
    sjmcefc2  
    OP
       2019-04-07 12:00:39 +08:00
    @joesonw 一个存储服务器(最大的有 40 盘位的), 用 10Ge 和 pc 连起来就好咯.
    是,可是钱哪里找啊
    vtoexshan
        40
    vtoexshan  
       2019-04-07 12:02:19 +08:00
    盘柜 orNAS
    Dragonish3600
        41
    Dragonish3600  
       2019-04-07 12:04:07 +08:00 via iPhone
    群晖 SHR,最适合不同容量的硬盘
    Dragonish3600
        42
    Dragonish3600  
       2019-04-07 12:04:46 +08:00 via iPhone
    如果是不同主机,那就 VMware vsan,不过容量会损失不少
    1daydayde
        43
    1daydayde  
       2019-04-07 12:14:08 +08:00
    当然是上 fastDFS 了
    winglight2016
        44
    winglight2016  
       2019-04-07 12:15:14 +08:00
    我之前搜索硬盘盒,发现似乎有 4 盘位还是 8 盘位的,USB 基本上可以全部挂上了
    Cheree
        45
    Cheree  
       2019-04-07 12:18:27 +08:00   4
    14 块盘才 40T 的容量,14 块盘一起用的电费都不少,而且上 14 块盘的设备成本也很高高,我的建议是二手清掉,换 5 块 8TB 上 NAS,有钱白的,没钱黑的
    MonoLogueChi
        46
    MonoLogueChi  
       2019-04-07 12:26:03 +08:00 via Android
    @sjmcefc2 以前我拿亚克力板做过一个硬盘架,画好图纸到淘宝上定制就可以了,十几块硬盘大小的,估计一百多块钱就可以搞定
    fox0001
        47
    fox0001  
       2019-04-07 13:01:35 +08:00 via Android
    @Cheree #45 确实,不要纠结于怎样废物利用
    jadeity
        48
    jadeity  
       2019-04-07 13:06:35 +08:00
    @Cheree 14 块二手盘能卖出一块 8T 的钱吗?按 365x24 小时算一瓦功耗一年差 8.8 度电,一块硬盘按 10 瓦功耗算 9 块 90 瓦一年 792 度电。按 5 年寿命算相差 3960 度,按 1.2 电价 5 年差 4752 块钱。一块 8t 硬盘现在最低也得 1500 块吧,不考虑一次性花几千块和 5 年花 4752 的差距,光是电费和换新的差价考虑也是不合算的。
    chinesestudio
        49
    chinesestudio  
       2019-04-07 13:22:18 +08:00 via Android
    三台普通台式机 装 proxmox 每台五块硬盘组 ceph 存储池。我的五台服务器还有 30 个 2.5 盘位 空着。可以关注一下 hp dl380p 噪音电量都很低 二手价格也比戴尔低。
    LifStge
        50
    LifStge  
       2019-04-07 13:22:26 +08:00
    @fox0001 #47 到最后 很有可能为了废物利用 却花费了接近全新的价格.... 服务器的耗电成本 才是大头. 手头上有的 能 diy 玩玩的 也不错 但是一定不能陷入为了废物利用而过多的大量投入... 到最后得不偿失
    envylee
        51
    envylee  
       2019-04-07 14:01:11 +08:00
    华硕 P7F-C/SAS,1156 针脚,14 个 sata 接口

    envylee
        52
    envylee  
       2019-04-07 14:03:41 +08:00
    我错了,好像你们在纠结怎么放,不是怎么连...
    metalbug
        53
    metalbug  
       2019-04-07 14:07:25 +08:00
    40t 还是放不下全部毛片
    youxiachai
        54
    youxiachai  
       2019-04-07 14:34:06 +08:00
    14 块硬盘。。买个 3U 的机箱了。。。
    lz 是没接触过服务器机箱?
    不过。还是楼上有个大佬说的对。。。如果 7*24 小时。电费是个坑
    msg7086
        55
    msg7086  
       2019-04-07 15:27:40 +08:00
    @jadeity 8T 最低 1500 块?之前我买的 10T 氦气也就 180USD=1210 人民币。

    @sjmcefc2 硬盘多了以后,接口 /平台成本会高于存储成本。如果你不介意单盘存储的,那就保持现状不动。如果要做集中式存储的,参考我以前写的帖子,弄一个 2U 的箱子装上 ZFS 然后把数据全部导进去。现有的硬盘可以出掉也可以当做冷备份。
    baijd
        56
    baijd  
       2019-04-07 16:01:08 +08:00 via Android
    @yingfengi 这矿渣用过?
    Navee
        57
    Navee  
       2019-04-07 16:06:02 +08:00
    https://www.zhihu.com/question/21359049/answer/622344230
    今天刚看到的方案,成本有点高,但是看上去性能不错
    SZP1206
        58
    SZP1206  
       2019-04-07 16:06:53 +08:00
    @Cheree 赞同
    sjmcefc2
        59
    sjmcefc2  
    OP
       2019-04-07 17:31:37 +08:00
    @Cheree 是个好主意。白的黑的你说的是群晖吧。
    @chinesestudio 感谢提醒。这个貌似也不错
    @youxiachai 没有接触过服务器机箱,目前全部泡在 pc server 上
    @msg7086 确实觉得单块大硬盘更加好用。接口、存储空间都是一个头疼的大问题。我去找找 zfs 的方案。可能还是保持现状更好
    电费确实有点。。。。。
    维持现状的问题就是,目前存储空间位置都无法固定了,都放在机箱里面,不知道有没有好的办法固定一下?
    vibbow
        60
    vibbow  
       2019-04-07 17:34:01 +08:00
    https://detail.tmall.com/item.htm?id=561730176491
    这种,多买几个,硬盘都放里面,然后 USB 插在同一台电脑上
    剩下的交给 Windows Stroage Space 就行了
    likuku
        61
    likuku  
       2019-04-07 20:52:57 +08:00
    买台 NetApp 吧,不在意预算的话,稳定可靠( ZFS 的师傅,当年还因此打官司)。
    zzlzhang
        62
    zzlzhang  
       2019-04-07 21:12:16 +08:00
    蜗牛星际垃圾的 C 款啊
    12 个 SATA3 口+ 1 个 SATA2 口
    才 400 多
    再去捡个 ATX 电源 外接上硬盘
    扔个黑裙
    多划算
    Jzer0n
        63
    Jzer0n  
       2019-04-07 21:23:26 +08:00
    @Cheree #45 同赞成这个方案。

    ===================

    不同容量真的不好管理,除了合理利用多余的硬盘这点,14 个盘啊
    yingyue
        64
    yingyue  
       2019-04-07 21:30:48 +08:00 via Android
    淘宝找一下 14 盘位的准系统也就 1000 多
    my3157
        65
    my3157  
       2019-04-08 01:42:55 +08:00
    偏题: 4U36 盘机器, 4T*36 or 10T* 36
    rpman
        66
    rpman  
       2019-04-08 07:19:13 +08:00 via iPhone
    我们实验室用服务器组 raid10,nfs 提供访问
    fonlan
        67
    fonlan  
       2019-04-08 07:54:52 +08:00 via Android
    如果有服务器的话直接装 FreeNAS。软 Raid 性能并不会比硬 Raid 差。
    evilangel
        68
    evilangel  
       2019-04-08 10:03:29 +08:00
    500 元打造 10 盘位 NAS:
    https://post.smzdm.com/p/apze5362/
    花 600 元,获得一个 24 盘位的 NAS 硬盘扩展柜
    https://post.smzdm.com/p/ag89d6m3/

    另外蜗牛星际矿机是有 13 sata 版本的,只是机箱太小放不下那么多没利用起来而已,可以花个三百来块钱买回来拆掉机箱换个电源再买几个 sata 线直接接出来也行。

    蜗牛星际 C 款双 I211 网卡 4G 内穿 13SATA 开箱及网卡测试
    https://post.smzdm.com/p/a4w0d668/
    easonl
        69
    easonl  
       2019-04-08 12:14:50 +08:00
    硬盘柜了解一下~
    vivisidea
        70
    vivisidea  
       2019-04-08 15:21:54 +08:00
    组 ceph 集群,通过多副本的方式来保证数据可靠和容量
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     3303 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 53ms UTC 11:00 PVG 19:00 LAX 04:00 JFK 07:00
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86