rrfeng
V2EX  ›  问与答

每年递增 2000w 每个 10k 左右大小的文件,需要可靠的存储,访问日志,方便备份,有哪些选择?

  •  
  •   rrfeng · Sep 28, 2013 · 2829 views
    This topic created in 4620 days ago, the information mentioned may be changed or developed.
    目前是放在数据库中,可靠性、备份、操作记录都很好,但是已经不堪重负

    有什么好的建议呢?请大家畅所欲言,待我慢慢研究……


    访问速度要求不是很高。
    5 replies    1970-01-01 08:00:00 +08:00
    aoyoo
        1
    aoyoo  
       Sep 28, 2013
    存储大量的小文件,我第一反应就是淘宝的tfs。
    yangzh
        2
    yangzh  
       Sep 28, 2013
    redis?
    vibbow
        3
    vibbow  
       Sep 28, 2013
    vhd ?
    gfreezy
        4
    gfreezy  
       Sep 28, 2013
    豆瓣的 beansdb
    Lax
        5
    Lax  
       Sep 28, 2013
    每年200G?这数量不算大,考虑的主要参数是访问量,对应的系统参数则是iops可能成为瓶颈。

    单机应该可以考虑。RAID,SSD都可以上,另加一台备份,或者用DRBD做同步。
    分布式文件系统的话,MooseFS也能扛住了。或者MogileFS。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3023 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 63ms · UTC 07:15 · PVG 15:15 · LAX 00:15 · JFK 03:15
    ♥ Do have faith in what you're doing.