请教分布式存储,多服务器组成一个存储的解决方案,谢谢 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
purezhang
V2EX    问与答

请教分布式存储,多服务器组成一个存储的解决方案,谢谢

  •  
  •   purezhang 2019 年 4 月 20 日 3890 次点击
    这是一个创建于 2480 天前的主题,其中的信息可能已经有所发展或是发生改变。

    目前有 2 组服务器,分别由 10 台和 20 台,每台有 12 块 10T 硬盘。 想组成 2 个可以共享出来的目录( iSCSI,NFS 都可以),或者有其他更好的方案,提供给另外不超过 5 台 server 做存储用。

    请教有什么解决方案,谢谢

    16 条回复    2021-08-11 22:56:12 +08:00
    msg7086
        1
    msg7086  
       2019 年 4 月 20 日
    GlusterFS? Ceph?
    msg7086
        2
    msg7086  
       2019 年 4 月 20 日
    其实你要的是软件方案还是硬件拓扑方案来着……
    whatever93
        3
    whatever93  
       2019 年 4 月 20 日 via Android
    cepp
    purezhang
        4
    purezhang  
    OP
       2019 年 4 月 20 日
    @msg7086 非常感谢提供一些思路,其实我是硬件资源如上述,需求就是供不超过 5 台服务器存储。
    硬件架构,软件选择都没定型,我的存储需求是通用文件系统,应用软件已经确定了,所以需求可能重点实在通用存储系统,也就是需要可以 mount,谢谢。
    purezhang
        5
    purezhang  
    OP
       2019 年 4 月 20 日
    @whatever93 ceph ?
    msg7086
        6
    msg7086  
       2019 年 4 月 20 日   1
    GlusterFS 基于文件,结构很简单,维护起来应该很容易,如果不介意的话直接 NFS mount 应该就行了。
    Ceph 可以做成块存储,然后共享出 iSCSI。

    硬件拓扑的话,集群内部最好用上专门的内网,不要和扇出流量抢带宽。
    purezhang
        7
    purezhang  
    OP
       2019 年 4 月 20 日
    需要使用专门的 API 来访问,不是通用的文件系统,不能 mount 成 path 的形式使用:
    MogileFS、FastDFS、OpenAFS、MooseFS、pNFS、GoogleFS

    通用文件系统
    Lustre、NFS、CePh、GlusterFS


    看来我需要的是后者,目前看,用的比较多的 CePh,ClusterFS
    purezhang
        8
    purezhang  
    OP
       2019 年 4 月 20 日
    @msg7086 很清晰了,谢谢
    ipwx
        9
    ipwx  
       2019 年 4 月 20 日
    @purezhang MooseFS 可以 mount,通过 fuse + mfsmount 程序(官方支持的方式)。
    ipwx
        10
    ipwx  
       2019 年 4 月 20 日
    @purezhang 我在实验室里面布了 MooseFS,还可以。Ceph 听说是更强大的文件系统,但是部署比 MooseFS 复杂太多,所以当年没上车。GlusterFS 是去中心化的,似乎加机器必须是加 replica 倍数的机器,很不灵活。
    purezhang
        11
    purezhang  
    OP
       2019 年 4 月 20 日
    @ipwx 收到,我去了解下,谢谢!
    chinesestudio
        12
    chinesestudio  
       2019 年 4 月 20 日 via Android
    proxmox ceph 你值得拥有
    chinesestudio
        13
    chinesestudio  
       2019 年 4 月 20 日 via Android
    或者 freenas 集群
    purezhang
        14
    purezhang  
    OP
       2019 年 4 月 21 日
    freenas 可以集群?
    911061873
        15
    911061873  
       2021 年 6 月 30 日
    @purezhang 最后结局了嘛? 我最近遇到同样的问题,两台服务器 想把存储容量做一起,变成一个共享空间。
    purezhang
        16
    purezhang  
    OP
       2021 年 8 月 11 日 via Android
    @911061873 本来是有个项目有需求,后来搁浅了……
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     1188 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 27ms UTC 17:49 PVG 01:49 LAX 09:49 JFK 12:49
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86