purezhang
V2EX  ›  问与答

请教分布式存储,多服务器组成一个存储的解决方案,谢谢

  •  
  •   purezhang · Apr 20, 2019 · 4048 views
    This topic created in 2580 days ago, the information mentioned may be changed or developed.

    目前有 2 组服务器,分别由 10 台和 20 台,每台有 12 块 10T 硬盘。 想组成 2 个可以共享出来的目录( iSCSI,NFS 都可以),或者有其他更好的方案,提供给另外不超过 5 台 server 做存储用。

    请教有什么解决方案,谢谢

    16 replies    2021-08-11 22:56:12 +08:00
    msg7086
        1
    msg7086  
       Apr 20, 2019
    GlusterFS? Ceph?
    msg7086
        2
    msg7086  
       Apr 20, 2019
    其实你要的是软件方案还是硬件拓扑方案来着……
    whatever93
        3
    whatever93  
       Apr 20, 2019 via Android
    cepp
    purezhang
        4
    purezhang  
    OP
       Apr 20, 2019
    @msg7086 非常感谢提供一些思路,其实我是硬件资源如上述,需求就是供不超过 5 台服务器存储。
    硬件架构,软件选择都没定型,我的存储需求是通用文件系统,应用软件已经确定了,所以需求可能重点实在通用存储系统,也就是需要可以 mount,谢谢。
    purezhang
        5
    purezhang  
    OP
       Apr 20, 2019
    @whatever93 ceph ?
    msg7086
        6
    msg7086  
       Apr 20, 2019   ❤️ 1
    GlusterFS 基于文件,结构很简单,维护起来应该很容易,如果不介意的话直接 NFS mount 应该就行了。
    Ceph 可以做成块存储,然后共享出 iSCSI。

    硬件拓扑的话,集群内部最好用上专门的内网,不要和扇出流量抢带宽。
    purezhang
        7
    purezhang  
    OP
       Apr 20, 2019
    需要使用专门的 API 来访问,不是通用的文件系统,不能 mount 成 path 的形式使用:
    MogileFS、FastDFS、OpenAFS、MooseFS、pNFS、GoogleFS

    通用文件系统
    Lustre、NFS、CePh、GlusterFS


    看来我需要的是后者,目前看,用的比较多的 CePh,ClusterFS
    purezhang
        8
    purezhang  
    OP
       Apr 20, 2019
    @msg7086 很清晰了,谢谢
    ipwx
        9
    ipwx  
       Apr 20, 2019
    @purezhang MooseFS 可以 mount,通过 fuse + mfsmount 程序(官方支持的方式)。
    ipwx
        10
    ipwx  
       Apr 20, 2019
    @purezhang 我在实验室里面布了 MooseFS,还可以。Ceph 听说是更强大的文件系统,但是部署比 MooseFS 复杂太多,所以当年没上车。GlusterFS 是去中心化的,似乎加机器必须是加 replica 倍数的机器,很不灵活。
    purezhang
        11
    purezhang  
    OP
       Apr 20, 2019
    @ipwx 收到,我去了解下,谢谢!
    chinesestudio
        12
    chinesestudio  
       Apr 20, 2019 via Android
    proxmox ceph 你值得拥有
    chinesestudio
        13
    chinesestudio  
       Apr 20, 2019 via Android
    或者 freenas 集群
    purezhang
        14
    purezhang  
    OP
       Apr 21, 2019
    freenas 可以集群?
    911061873
        15
    911061873  
       Jun 30, 2021
    @purezhang 最后结局了嘛? 我最近遇到同样的问题,两台服务器 想把存储容量做一起,变成一个共享空间。
    purezhang
        16
    purezhang  
    OP
       Aug 11, 2021 via Android
    @911061873 本来是有个项目有需求,后来搁浅了……
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5657 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 58ms · UTC 07:31 · PVG 15:31 · LAX 00:31 · JFK 03:31
    ♥ Do have faith in what you're doing.