xiyangyang
V2EX  ›  Hadoop

创建一个基于 Spark 的生产平台,什么样的硬件配置是最普遍的

  •  
  •   xiyangyang · Mar 16, 2016 · 3466 views
    This topic created in 3753 days ago, the information mentioned may be changed or developed.

    每天数据量大约是 1000 万条,大部分是文本,需要快速查询出结果。
    spark 对内存要求比较高,业内普遍的服务器配置里面 CPU 和内存是怎么配置的?

    谢谢!

    2 replies    2016-03-17 07:59:35 +08:00
    knightdf
        1
    knightdf  
       Mar 16, 2016
    才 1000W 而已嘛,啥配置不行。。。
    ming2050
        2
    ming2050  
       Mar 17, 2016 via Android
    貌似数据量有点小
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1532 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 16:37 · PVG 00:37 · LAX 09:37 · JFK 12:37
    ♥ Do have faith in what you're doing.