xiyangyang
V2EX  ›  Hadoop

创建一个基于 Spark 的生产平台,什么样的硬件配置是最普遍的

  •  
  •   xiyangyang · Mar 16, 2016 · 3451 views
    This topic created in 3746 days ago, the information mentioned may be changed or developed.

    每天数据量大约是 1000 万条,大部分是文本,需要快速查询出结果。
    spark 对内存要求比较高,业内普遍的服务器配置里面 CPU 和内存是怎么配置的?

    谢谢!

    2 replies    2016-03-17 07:59:35 +08:00
    knightdf
        1
    knightdf  
       Mar 16, 2016
    才 1000W 而已嘛,啥配置不行。。。
    ming2050
        2
    ming2050  
       Mar 17, 2016 via Android
    貌似数据量有点小
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2613 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 33ms · UTC 07:14 · PVG 15:14 · LAX 00:14 · JFK 03:14
    ♥ Do have faith in what you're doing.